рефераты конспекты курсовые дипломные лекции шпоры

Реферат Курсовая Конспект

Эргодические источники.

Эргодические источники. - раздел Философия, Дисциплина Теория информации Тема №3: Источники информации и их энтропия Все Дискретные Источники Без Памяти Относятся К Классу Эргодических, Т.е. Обл...

Все дискретные источники без памяти относятся к классу эргодических, т.е. обладают свойством эргодичности.

Эргодичность - это постоянство поведения случайного процесса во времени.

Примером эргодического процесса является бросание монетки или игрального кубика.

Свойство эргодичности процесса позволяет применять операцию усреднения для определения энтропии как среднего количества информации источника.

Другими словами, источник будет называться эргодическим, если его вероятностные параметры можно оценить по одной достаточно длинной реализации, которую он вырабатывает. В этом случае реализации, по которым можно оценить закон распределения, являются типичными. Поэтому эргодическим источником можно назвать источник, который вырабатывает типичные последовательности.

Однако свойством эргодичности могут обладать и источники с памятью. Например, эргодические источники являются наиболее близкими, с вероятностной точки зрения, моделям осмысленных сообщений (литературных текстов и прочее).

А, следовательно, для эргодических источников справедливы все понятия рассмотренной энтропии дискретных источников без памяти, которые являются эргодическими.

Кроме того, понятия энтропии стационарного дискретного источника, , а также совместной и условной энтропий и их свойств, имеют место, если стационарный источник является эргодическим.

 

– Конец работы –

Эта тема принадлежит разделу:

Дисциплина Теория информации Тема №3: Источники информации и их энтропия

Тамбовский государственный технический университет... Кафедра Информационные системы... Дисциплина Теория информации...

Если Вам нужно дополнительный материал на эту тему, или Вы не нашли то, что искали, рекомендуем воспользоваться поиском по нашей базе работ: Эргодические источники.

Что будем делать с полученным материалом:

Если этот материал оказался полезным ля Вас, Вы можете сохранить его на свою страничку в социальных сетях:

Все темы данного раздела:

Дискретные источники без памяти и с памятью.
До сих пор мы рассматривали простейший источник информации - так называемый дискретный источник без памяти. Напомним, что такой источник X в каждый фиксированный момент времени выдает некото

Марковские источники
В классе дискретных источников с памятью особое место занимают марковские источники. Их описание базируются на математическом аппарате марковских цепей, с помощью которых можно составить мат

Хотите получать на электронную почту самые свежие новости?
Education Insider Sample
Подпишитесь на Нашу рассылку
Наша политика приватности обеспечивает 100% безопасность и анонимность Ваших E-Mail
Реклама
Соответствующий теме материал
  • Похожее
  • Популярное
  • Облако тегов
  • Здесь
  • Временно
  • Пусто
Теги