Синтаксическая мера информации

 

Объем данных Vд. в сообщение измеряется количеством символов (разрядов) в этом сообщении. В различных системах счисления один разряд имеет различный вес и соответственно меняется единица измерения данных:

Ø в двоичной системе счисления единица измерения - бит (bit-binary digit-двоичный разряд);

Ø в десятичной системе счисления единица измерения – дит (десятичный разряд).

Количество информации I на синтаксическом уровне невозможно определить без рассмотрения понятия неопределенности состояния системы (энтропии системы). Получение информации о какой–либо системе всегда связано с изменением степени неосведомленности получателя о состоянии этой системы. (теория Шеннона).