ТЕОРИЯ Лаб Работ (1024334), страница 3
Текст из файла (страница 3)
К сожалению, метод стандартизации не всегда приводит к положительному результату. Действительно, прежде всего следует отметить, что коэффициент обусловленности уравнения (2), используемого для определения вектора , Cond(FTF) больше коэффициента обусловленности исходного уравнения CondF, т.к. Cond(FTF)=(CondF)2 и CondF>1. Следовательно, применение данной схемы увеличивает погрешность определения вектора . С другой стороны для определения вектора необходимо обратить матрицу (FTF)-1, как известно операция обращения матрицы является наименее точной, что также увеличивает погрешность определения вектора .
С учетом сказанного метод наименьших квадратов целесообразно модифицировать таким образом, чтобы исключить указанные недостатки.
МЕТОД Наименьших квадратов на основе матриц с ортоНОРМИРОВАННЫми столбцами
Рассмотрим систему уравнений с матрицей, состоящей из ортонормированных столбцов
Поскольку ETE=I, то решение этого уравнения имеет вид
Поскольку CondET=CondE=1, то в данном случае коэффициент обусловленности системы уравнений не изменяется и, кроме того, является минимально возможным (CondE1).
Найдем теперь выражение для оценки дисперсии i-той координаты вектора . Прежде всего отметим, что значение dii, входящее в выражение (3) равно 1. Действительно, поскольку в данном случае F=E и FTF=ETE=I и I-1=I, то dii=1. Далее учитывая, что
для получим следующее выражение
т.е. дисперсия одна и та же для всех координат вектора .
Если матрица ортогональна, но не нормирована, то приведенные выше формулы усложняются. Однако, если норма всех вектор столбцов матрицы E одинакова ( в случае матрицы Уолша норма вектор столбца равна N - размерности вектора), то формулы усложняются незначительно и принимают вид
Рассмотрим исходное уравнение
Разложим матрицу F в произведение двух матриц F=ET, где E - ортонормированная матрица размера N x M, T- верхнетреугольная матрица размера M x M. Поскольку ортонормированная матрица удовлетворяет следующим свойствам ET=E-1 , CondE=1, то для определения вектора получим уравнение
Коэффициент обусловленности данного уравнения совпадает с коэффициентом обусловленности исходного уравнения и для решения данного уравнения не нужно обращать матрицу (поскольку система уравнений с треугольной матрицей может быть решена без обращения матрицы), следовательно, данная схема обладает более высокой точностью при определении вектора .
МЕТОД ГРЕБНЕВОЙ РЕГРЕССИИ
Если система уравнений очень плохо обусловлена или вырождена, то рассмотренные выше методы не дадут положительного результата. В этом случае целесообразно попытаться исправить матрицу системы уравнений таким образом чтобы она стала не вырожденной.
Рассмотрим систему уравнений
где - действительная, симметричная, неотрицательно определенная матрица. Собственные числа такой матрицы попарно различны
. Определитель матрицы FTF равен
. Если n=0, то матрица FTF будет вырождена.
Рассмотрим матрицу , где r>0. Спектр собственных чисел этой матрицы имеет вид
, а определитель равен
т.е. матрица не вырождена. Следовательно система уравнений
имеет решение. Если r <<1, то можно ожидать, что решение исправленного уравнения будет мало отличатся от решения исходного уравнения. Определенные трудности при реализации данного метода связаны с отсутствием объективного метода определения оптимального значения коэффициента r. В методе гребневой регрессии его значение прелагается определять по графику зависимостей выбирая в качестве оптимального значения r0 то минимальное значение r начиная с которого
начинают слабо изменяться. Очевидно, что данная методика весьма субъективна и будет давать положительный результат далеко не всегда. Для получения более точных результатов необходимо иметь объективную методику определения оптимального значения коэффициента r.
1 Большев Л.В., Смирнов Н.И. Таблицы математической статистики. М.,ВЦ АН СССР 1968
2 Вучков И., Бояджиев Л., Солаков Е. Прикладной линейный регрессионный анализ. - М.: Финансы и статистика, 1987