воскресенье, 9 сентября 2018 г.

Измерение информации

Измерение информации. Содержательный подход

Измеряется количество информации в сообщении об исходе некоторого события.

Равновероятные исходы: никакой результат не имеет преимущества перед другими.

2^i=N

N - неопределенность знаний - количество возможных исходов события (вариантов сообщений);

битов  - количество информации в сообщении об одном исходе события.

Частный случай: два равновероятных результата события.
N=2 i=1 бит

1 бит - количество информации в сообщении об одном из двух равновероятных результатов некоторого события

Формула Хартли: i=log2N




Комментариев нет:

Отправить комментарий