Идея:
количество информации определяется временем ее передачи
количество информации – это длина сообщения, с помощью которого её можно закодировать.
Символы двоичного кода 0 и 1 принято называть битами.
Бит – наименьшая единица измерения информации
Поступающее человеку сообщение информативно (содержит ненулевую информацию), если оно пополняет знания человека, если содержащиеся в нём сведения являются новыми и понятными.
Если сведения старые, известные или непонятные, то сообщение неинформативно (содержит нулевую информацию).
Содержательный подход
Вчерашняя, полностью прочитанная газета (не пополняет знания человека) - количество информации данного источника = 0.
Свежая газета (пополняет знания человека) - количество информации данного источника 0.
ПРИМЕР
Количество информации как мера уменьшения неопределенности знания
ПРИМЕР 1
Ученик сдал тетрадь с выполненной контрольной работой. Он не знает оценку за работу, мучается неопределенностью. Наконец, учитель объявляет результат. Ученик получает сообщение, которое приносит полную определенность, теперь он знает оценку. Ученик получил информацию.
Подход к информации как мере уменьшения неопределенности знаний позволяет количественно измерять информацию.
N = 2I
N=2 2i=2 i =1 бит.
Таким образом, сообщение о результате жребия несёт 1 бит информации.
2. «Вы выходите на следующей остановке?» – спросили человека в автобусе. «Нет», - ответил он. Сколько информации содержит ответ?
N=2, т.к. можно ответить «Да» или «Нет», т.е. выбрать один ответ из двух возможных 2i=2 i =1 бит.
Таким образом, сообщение несёт 1 бит информации.
Из двух сигналов (желтого и зеленого) необходимо выбрать один – зеленый N=2 2i=2 i =1 бит.
4. На железнодорожном вокзале 8 путей отправления поездов. Вам сообщили, что ваш поезд прибывает на четвертый путь. Сколько информации вы получили?
Из 8 путей нужно выбрать один N=8 2i=8 i =3 .
Таким образом, сообщение несёт 3 бита информации.
Это сайт презентаций, где можно хранить и обмениваться своими презентациями, докладами, проектами, шаблонами в формате PowerPoint с другими пользователями. Мы помогаем школьникам, студентам, учителям, преподавателям хранить и обмениваться учебными материалами.
Email: Нажмите что бы посмотреть