Автор статьи
Валерия
Эксперт по сдаче вступительных испытаний в ВУЗах
Модуль 2. Измерение информации. Количество информации. Тема 2.2 Формула Шеннона.
Основные понятия: количество информации, мера Шеннона. Решите задачу 1: В корзине лежат груша и яблоко. Какое количество информации содержится в сообщении: «Оля взяла яблоко»? А в сообщении «Оля взяла грушу? Сравните эти два сообщения. Что общего между ними? Решите задачу 2: В корзине лежат 4 груши и 4 яблока. Какое количество информации содержится в сообщении: «Оля взяла яблоко»? А в сообщении «Оля взяла грушу? Что общего между этими двумя сообщениями? Как можно назвать события, о которых идет речь в задачах 1 и 2? Решите задачу 3: В корзине лежат 9 груш и 3 яблока. Какое количество информации содержится в сообщении: «Оля взяла яблоко»? А в сообщении «Оля взяла грушу? Можно ли решить данную задачу таким же способом, как и две предыдущие? Почему? Заполните таблицу| «!» | «?» |
- В ящике лежат 36 красных и несколько зеленых яблок. Сообщение «Из ящика достали зеленое яблоко» несет 2 бита информации. Сколько яблок в ящике?
- В концертном зале 270 девушек и несколько юношей. Сообщение «Первым из зала выйдет юноша» содержит 4 бита информации. Сколько юношей в зале.
- На остановке останавливаются автобусы с разными номерами. Сообщение о том, что к остановке подошел Автобус с номером N1 несет 4 бита информации. Вероятность появления на остановке автобуса с номером N2 в два раза меньше, чем вероятность появления автобуса с номером N1. Сколько информации несет сообщение о появлении на остановке автобуса
- По формуле Хартли количество инфоpмации в битах = -log2 p, где p — веpоятность события. В данном случае вероятность вытащить зеленое яблоко равна 1/4. То есть 1/4 всех яблок — зеленые (а оставшиеся 3/4 — красные). Следовательно, всего яблок — 48.
- n4=270
- log2 (1/p1)=4
О сайте
Ссылка на первоисточник:
http://www.viapi.ru/
Поделитесь в соцсетях: