Общий смысл оценивания по методу наименьших квадратов заключается в минимизации суммы квадратов отклонений наблюдаемых значений зависимой переменной от значений, предсказанных моделью.
Более точно, оценки наименьших квадратов (НК) параметра q получаются минимизацией функции Q по , где:
Отметим, что - это известная функция
,
, где i = от 1 до n,
- это случайные величины (например, погрешности измерений), средние которых обычно полагаются равными 0.
Связанные определения:
Линейная регрессия
Логистическая регрессия
Матрица плана
Независимый признак
Общая линейная модель
Регрессия
Связанные статьи:
Выбор наилучшей линейной модели: критерий Акаике и Шварца
Как выбрать наилучшую линейную модель?
Логистическая регрессия
Множественная линейная регрессия
Наилучшее линейное приближение
Об одной логит-регрессионной модели
Основы линейной регрессии
Применение логистической регрессии: задача о программистах
Частные корреляции. Часть 2