- •Обобщенная структура системы связи. 3. Характеристики систем связи.
- •Помехи в системах связи. Характеристики помех.
- •Информация. Понятие информации. Меры информации.
- •5. Мера Хартли
- •Вероятностный подход к измерению информации.
- •8. Статистическая мера количества информации.
- •Типичные сообщения, их свойства.
- •10. Семантический подход к оценке информации.
- •Энтропия дискретных сообщений.
- •Свойства энтропии.
- •Энтропия непрерывных сообщений.
- •14. Распределения с максимальной энтропией.
- •Непрерывные и дискретные сообщения. Общность и различие.
- •Характеристики случайных процессов.
- •18. Понятие стационарности случайного процесса (ссп).
- •Свойство эргодичности ссп.
- •20. Свойства корреляционной функции стационарного случайного процесса
- •23. Эффективная ширина спектра случайного процесса 21. Интервал корреляции.
- •Дискретизация по времени. Факторы, влияющие на выбор интервала дискретизации.
- •25. Теорема котельникова
- •26. Корреляционный критерий
- •Критерий наибольшего допустимого отклонения.
- •Оценка погрешности восстановления сигнала по дискретным отсчетам.
- •Функция отсчетов. Ее свойства.
- •Энтропия статистически зависимых сообщений.
- •31. Квантование по уровню
- •32. Тепловой, дробовый и фликкер шумы
- •Количество информации при наличии помех. 34. Как проявляется действие помех при передаче непрерывных и дискретных сообщений.
- •Скорость передачи информации.
- •Согласование источников сообщений с каналом связи.
- •Цели и задачи кодирования.
- •Оптимальное кодирование.
- •45. Критерий оптимальности кода.
- •Код Шеннона-Фано. Код Хаффмена.
- •Кодирование блоков сообщений.
-
Характеристики случайных процессов.
Простейшими моментными функциями, в основном используемыми для характеристики случайных процессов, являются моменты распределения первых двух порядков: математическое ожидание, дисперсия и корреляционная функция случайного процесса. Математическое ожидание (или первый момент одномерного закона распределения) выражается формулой (3.7)
Физически математическое ожидание выражает среднее значение cовокупности выборок случайного процесса (случайной величины x(t1) в определенный момент времени t1). Дисперсия (или второй центральный момент одномерного закона распределения)—это математическое ожидание квадрата отклонения величин x(t1) от математического ожидания в определенный момент времени t1 определяемое выражением
(3.8) Дисперсия выражает меру разброса значений случайной величины x(t1) около математического ожидания, иными словами — «степень случайности» величины x(t1). Корень квадратный из дисперсии принято называть среднеквад-ратическим отклонением случайной величины. Аналогично можно найти среднее значение квадрата случайной величины x(t1) (3.9)
Положительный корень σ[х(t1)] из этой величины называется среднеквадратическим значением х(t1) Из (3.8) можно установить следующую зависимость между дисперсией и среднеквадратическим значением случайной величины
С учетом того, чтоможно получить (3.10) т. е. дисперсия равна разности квадратов среднеквадратического значения и математического ожидания. При а = 0 дисперсии D [х (t1)] совпадают с квадратом среднеквадратического значения σ2[x(t1)] случайной величины x(t1). Математическое ожидание, дисперсия и среднеквадратическое значение случайной величины являются в общем случае функцией времени. Они приближенно характеризуют поведение случайного процесса в отдельные моменты времени, но совершенно не затрагивают связь между значениями случайного процесса в различные моменты времени. Эту связь выражает корреляционная функция Кхх (t1 ,t2), определяемая как среднее значение произведения значений случайной функции x(t) в моменты времени t1 и t2
Связь между значениями двух случайных процессов х (t1) и у (t2) в моменты времени t1 и t2 соответственно выражает взаимная корреляционная функция Kxy(t1, t2). определяемая как среднее значение произведения х (t1) у (t2)
Иногда рассматривают нормированную автокорреляционную rхх и взаимную корреляционную rху функции (коэффициенты корреляции), определяемые выражениями
(3.13) (3.14) Нормированные корреляционные функции удобны тем, что они не превосходят единицы по абсолютной величине. Математическое ожидание, дисперсия, квадрат среднеквадратического значения и корреляционная функция, определяемые выражениями (3.7), (3.8) и (3.11), получены путем осреднения по множеству реализаций случайного процесса для фиксированных моментов времени Осредненные характеристики могут быть также получены путем обработки одной из реализаций случайного процесса на достаточно большом интервале времени. Среднее по времени значение случайного процесса определяется выражением (3.15) где xi(t) — реализация случайного процесса x(t); Т — время наблюдения процесса.
По аналогии пользуются понятиями среднего по времени значения от функции х2 (t), от квадрата разности [х (t) — х]2 и от произведения x(t) • х (t + т), определяемыми соответственно выражениями (3.16) (3.17)
(3.18) В общем случае для различных реализаций случайного процесса получаются различные значения среднего по времени от х (t), xz (t), [x(t) — x] и x(t) • x(t + т ). Если предположить, что х (t) представляет изменение напряжения (или тока), то физически (3.15) равно мощности постоянной составляющей, рассеиваемой на сопротивлении в 1 Ом. В связи с этим считают, что среднее по времени х выражает мощность постоянной составляющей реализации случайного процесса x(tk). По аналогии можно считать, что (3.16) выражает полную среднюю мощность, а (3.17) выражает среднюю мощность «случайной» составляющей процесса x(t). Если случайный сигнал является дискретным, то числовые характеристики определяются выражениями
(3.19)
где Pk — априорная вероятность случайной величины xk; Pk,k+e — совместная априорная вероятность величин xk и xk+e; n — число значений случайной величины х.