Полезное:
Как сделать разговор полезным и приятным
Как сделать объемную звезду своими руками
Как сделать то, что делать не хочется?
Как сделать погремушку
Как сделать так чтобы женщины сами знакомились с вами
Как сделать идею коммерческой
Как сделать хорошую растяжку ног?
Как сделать наш разум здоровым?
Как сделать, чтобы люди обманывали меньше
Вопрос 4. Как сделать так, чтобы вас уважали и ценили?
Как сделать лучше себе и другим людям
Как сделать свидание интересным?
Категории:
АрхитектураАстрономияБиологияГеографияГеологияИнформатикаИскусствоИсторияКулинарияКультураМаркетингМатематикаМедицинаМенеджментОхрана трудаПравоПроизводствоПсихологияРелигияСоциологияСпортТехникаФизикаФилософияХимияЭкологияЭкономикаЭлектроника
|
Алфавитный подход к измерению информации
Существует несколько способов измерения количества информации. Один из них называется алфавитный. Алфавитный подход позволяет измерять количество информации в тексте (символьном сообщении), составленном из символов некоторого алфавита.
К содержанию текста такая мера информации отношения не имеет. Поэтому такой подход можно назвать объективным, то есть не зависящим от воспринимающего его субъекта.
Алфавит – это набор букв, знаков, цифр, скобок
При алфавитном подходе считается, что каждый символ текста имеет определенный информационный вес. Информационный вес символа зависит от мощности алфавита. Какова минимальная мощность алфавита, с помощью которого можно записывать (кодировать) информацию?
Назовем комбинацию из 2-х, 3-х и т.д. бит двоичным кодом. Сколько символов можно закодировать двумя битами?
Отсюда следует, что в алфавите мощностью 4 символа информационный вес каждого символа - 2 бита.
Сколько символов можно закодировать тремя битами?
Отсюда следует, что в алфавите мощностью 8 символов информационный вес каждого символа - 3 бита. Можно сделать вывод, что в алфавите мощностью 16 символов информационный вес каждого символа будет 4 бита. Обозначим мощность алфавита буквой N, а информационный вес символа буквой b. Зависимость между мощностью алфавита N и информационным весом символа b.
Заметим, что 2 = 21, 4 = 22, 8 = 23, 16 = 24. Таким образом, можно сделать вывод: Информационный вес каждого символа, выраженный в битах (b), и мощность алфавита (N) связаны между собой формулой: N = 2B (Материал с сайта http://school497.ru/download/u/02/les6/les.html)
|