Измерение информации Алфавитный подход Содержательный подход
Содержательный подход: Процесс познания приводит к накоплению информации, то есть к уменьшению Процесс познания приводит к накоплению информации, то есть к уменьшению незнания. Количество информации – мера уменьшения неопределенности знаний при получении информационного сообщения.
Содержательный подход: Единица количества информации – 1 бит. Единица количества информации – 1 бит. 1 бит – количество информации в сообщении, которое уменьшает неопределенность в два раза. 1 бит – количество информации в сообщении, которое уменьшает неопределенность в два раза. N = 2 i N = 2 i Где N - количество вариантов исхода; i - количество информации, которое несет сообщение. i - количество информации, которое несет сообщение.
Таблица определения количества информации i (к-во бит) N(к-во исход) N = 2 i
Единицы измерения 1 байт = 8 бит 1 байт = 8 бит 1 килобайт = 1Кб=2 10 байт =1024 байта; 1 килобайт = 1Кб=2 10 байт =1024 байта; 1 мегабайт = 1Мб= 2 10 Кб = 1024 Кб; 1 мегабайт = 1Мб= 2 10 Кб = 1024 Кб; 1 гигабайт = 1Гб = 2 10 Мб = 1024 Мб. 1 гигабайт = 1Гб = 2 10 Мб = 1024 Мб.
Перевод единиц измерения битбайтКбайтМбайтГбайт *8 *1024 : 1024 : 8
Объем информации равен длине двоичного кода Основная единица: 1 бит- один разряд двоичного кода Длина кода символа(i бит) кодируемого алфавита мощностью N символов Длина кода символа(i бит) кодируемого алфавита мощностью N символов N = 2 i N = 2 i Информационный объем текста (I), содержащего K символов: Информационный объем текста (I), содержащего K символов: I=K*i I=K*i
Правило для измерения информации с точки зрения алфавитного подхода. Правило для измерения информации с точки зрения алфавитного подхода. 1. Найти мощность алфавита – N 2. Найти информационный объем одного символа – i 2 i =N 3. Найти количество символов в сообщении – K 4. Найти информационный объем всего сообщения – I K*i Алфавитный подход
Задачи для самостоятельной работы Сообщение записано с помощью алфавита, содержащего 8 символов. Какое количество информации несет одна буква этого алфавита? Сообщение записано с помощью алфавита, содержащего 8 символов. Какое количество информации несет одна буква этого алфавита? Сообщение, записанное буквами из 128-символьного алфавита, содержит 30 символов. Какой объем информации оно несет? Сообщение, записанное буквами из 128-символьного алфавита, содержит 30 символов. Какой объем информации оно несет?