Лекция: Меры информации

Существует 3 направления в определении мер информации.

Синтаксическая мера информации оперирует с обезличенной информацией, не выражающей смыслового отношения к объекту.

Объем данных Vд в сообщении измеряется количеством символов (разрядов) в этом сообщении. В различных системах счисления один разряд имеет различный вес и соответственно меняется единица измерения данных:

В двоичной системе счисления единица измерения – бит (bit – binary digit – двоичный разряд) – это количество информации, необходимое для различения двух равновероятных сообщений

В десятичной системе счисления единица измерения – дит (десятичный разряд).

Пример.

Сообщение в двоичной системе в виде восьмиразрядного двоичного кода 11001011 имеет объем данных Vд=8бит=1байт, сообщение в десятичной системе в виде числа 281934 имеет объем данных Vд=6дит.