Васюков В.Н. Введение в теорию сигналов (1275344), страница 10
Текст из файла (страница 10)
Теория случайных процессов представляет собой большой раздел теории вероятностей, который невозможно рассмотреть даже вкратце в пределах этого пособия, поэтому ограничимся лишь некоторыми замечаниями, касающимися применения аппарата линейных пространств для описания случайных величин, которые можно понимать, как отсчёты случайных процессов в некоторый момент времени. Для более полного изучения теории вероятностей и теории случайных процессов следует обратиться к специальным учебникам, например [6].
Случайной величиной называется любая функция, определенная на множестве
. При фиксированном
значение
также фиксировано; оно называется реализацией случайной величины
.
Полное описание случайной величины составляет функция распределения, определяемая через меру . Чаще всего случайная величина принимает значения из поля
вещественных чисел, тогда функция распределения
определяется через вероятность события, состоящего в том, что случайная величина принимает значение, не превосходящее заданного значения
. Функция
называется плотностью распределения вероятности. Очевидно, функция распределения по определению должна быть неотрицательной неубывающей функцией со свойствами
,
. Следовательно, плотность распределения должна быть неотрицательной функцией, удовлетворяющей условию нормировки
.
Иногда нет необходимости использовать полное описание случайной величины, и можно ограничиться её числовыми характеристиками. Чаще всего в качестве таких характеристик выступают так называемые моменты, определяемые следующими выражениями. Начальный момент -го порядка (
-й начальный момент)
где горизонтальная черта и – символические обозначения интегрального оператора усреднения по ансамблю. Наиболее часто используется первый начальный момент
, называемый математическим ожиданием, или центром распределения. Смысл этого понятия становится яснее из физической аналогии: если плотность распределения вероятностей рассматривать, как линейную плотность бесконечно тонкого стержня единичной массы, то математическое ожидание равно координате центра масс стержня.
Центральный момент -го порядка (
-й начальный момент)
равен -му начальному моменту центрированной случайной величины
.
Наиболее употребительным из центральных моментов является дисперсия
В рассмотренном выше механическом примере дисперсии соответствует момент инерции стержня при вращении его вокруг центра масс.
Еще одной числовой характеристикой является средний квадрат, или второй начальный момент . Нетрудно видеть, что он связан с дисперсией и математическим ожиданием:
Две случайные величины и
, заданные на общем пространстве
, характеризуются совместной плотностью распределения
. Числовыми характеристиками совместной плотности служат начальные и центральные смешанные моменты
Поскольку случайная величина является функцией, на множестве случайных величин можно определить структуру гильбертова пространства. Действительно, случайные величины (как функции на пространстве ) можно складывать, при этом сумма снова будет случайной величиной. Случайные величины можно умножать на скалярные коэффициенты из поля
, причем множество случайных величин замкнуто относительно такого умножения. Справедливость аксиом линейного пространства (разд. 2.2) легко проверяется непосредственно. Таким образом, множество всех вещественных случайных величин можно рассматривать, как линейное пространство над полем
вещественных чисел (аналогично можно ввести пространство комплексных случайных величин над полем
комплексных чисел и т.д.). Дальнейшее усовершенствование структуры пространства связано с введением нормы, метрики и скалярного произведения. Для того, чтобы пространство было гильбертовым, необходимо, чтобы норма порождалась скалярным произведением, а метрика – нормой [2]. Операцию скалярного умножения определим для вещественных случайных величин
и
, как смешанный момент второго порядка
называемый корреляционным моментом. Проверим выполнение аксиом скалярного произведения (см. разд. 2.3).
Из очевидно выполнение равенства .
Проверка выполнения условия может быть произведена непосредственно:
Здесь – совместная плотность трёх случайных величин, которая при интегрировании по одному из аргументов даёт совместную плотность оставшихся двух случайных величин, например
.
Третье условие, очевидно, выполняется: , поскольку
– не что иное, как средний квадрат, неотрицательный по определению. Равенство нулю среднего квадрата (как второго начального момента плотности) возможно только в том случае, если вся «масса» сосредоточена в точке
. Таким образом, роль нулевого вектора в рассматриваемом пространстве играет случайная величина, которая принимает значение 0 с вероятностью 1.
Норма определяется, как , а через норму задается метрика
Итак, множество случайных величин, определенных на общем пространстве элементарных событий, может быть снабжено структурой гильбертова пространства. В частности, если две величины имеют нулевой корреляционный момент, то они называются ортогональными. К такому пространству применимы все ранее введенные понятия, такие, как базис, ортонормальный базис, ортогонализация Грама-Шмидта, равенство Парсеваля и т.п.
В следующем примере предполагается, что математическое ожидание случайных величин равно нулю, тогда средний квадрат совпадает с дисперсией, а корреляционный момент – с ковариационным (вторым смешанным центральным моментом).
Пример 27. Задача оптимальной фильтрации состоит в том, чтобы по наблюдаемому сигналу наилучшим образом оценить полезный (случайный) сигнал
. Оптимальный линейный фильтр – это линейный оператор
, вырабатывающий оценку, такую, что дисперсия ошибки оценивания
минимальна.
Р
Рис. 33. Геометрическая интерпретация принципа оптимального линейного оценивания
езультат воздействия на сигнал



Из геометрических соображений ясно, что дисперсия ошибки оценивания (норма ошибки) будет минимальна в том случае, если вектор ошибки будет ортогонален этому подпространству (ошибка некоррелирована с наблюдаемым сигналом во все моменты времени), отсюда условие оптимальности оператора
Учитывая, что линейный оператор выражается интегралом, для оптимальной линейной оценки получаем
где – весовая функция (ядро оператора), имеющая смысл отклика фильтра в момент времени
на значение наблюдаемого сигнала в момент
,
– переменная, имеющая размерность времени. Раскрывая скобки и выполняя усреднение, получаем
откуда следует уравнение Винера-Хопфа
где – смешанный момент отсчетов случайного процесса
в моменты времени
и
, называемый функцией автокорреляции процесса
, а
смешанный момент отсчетов различных процессов, называемый функцией взаимной корреляции процессов
и
.
Импульсная характеристика оптимального линейного устройства оценивания находится, как решение уравнения Винера – Хопфа.◄
ЗАКЛЮЧЕНИЕ
Ограниченный объем учебного пособия не позволил рассмотреть очень многие интересные и важные вопросы теории сигналов. Автор надеется, что материал пособия послужит для читателя импульсом к самостоятельному изучению теории и поможет в её применении к решению практических проблем.
ЛИТЕРАТУРА
-
Владимиров В.С. Обобщенные функции в математической физике. – М.: Наука, 1976. – 280 с.
-
Френкс Л. Теория сигналов. – М.: Сов. радио, 1974. – 344 с.
-
Колмогоров А.Н., Фомин С.В. Элементы теории функций и функционального анализа. – М.: Наука, 1972. – 496 с.
-
Ратынский М.В. Основы сотовой связи. М.: Радио и связь, 2000. – 248 с.
-
Оппенгейм А.В., Шафер Р.В. Цифровая обработка сигналов.– М.: Связь, 1979. – 416 с.
-
Вентцель Е.С., Овчаров Л.А. Теория случайных процессов и её инженерные приложения. – М.: Высш. шк., 2000. – 383 с.
) Производная -функции определяется выражением
.
) Функционалом называется отображение, ставящее функции (или совокупности функций) в соответствие число.
) Элементы счетного множества могут быть пронумерованы, т.е. поставлены в соответствие элементам множества целых неотрицательных чисел.
) Напомним, что в существуют полные ортонормальные счетные базисы (например, базис, составленный из функций Эрмита [3]), но они, к сожалению, не являются собственными для ЛИС-цепей.
) Известны также варианты доказательства теоремы отсчётов, связанные с именами Э. Уиттекера, Х. Найквиста, К. Шеннона.