Содержательный подход Информация знания, получаемая человеком из различных источников. Сообщение Информативность сообщения Сообщение, содержащее сведения о том, что произошло одно из множества N возможных событий Неопределенность знания о результатах некоторого события Информационный поток, который в процессе передачи информации поступает к принимающему его субъекту. Сообщение информативно, если содержащиеся в нем сведения являются для него новыми и понятными Число возможных вариантов результата сообщения
События равновероятны Наименьшая единица измерения информация бит Формулы для измерения информационных сообщений 2 i =N i=log 2 N События равновероятны, если наступление каждого из них не имеет преимущества перед другими За единицу количества информации принято такое количество информации, которое содержит сообщение, уменьшающее неопределенность знаний в 2 раза. Такая единица названа бит (binary digit). i=log 2(1/p) Структурно-логическая схема содержательного подхода к измерению информации
Алфавитный подход Информация Алфавит, мощность алфавита Отображение содержания, полученного из внешнего мира в виде последовательности символов (сигналов) некоторого алфавита Алфавит — это конечное множество символов, используемых для представления информации. Мощность – это число символов в алфавите. Информационная емкость (вес) символа Наименьшая единица измерения информации бит Количество информации, которое несет символ. Информационный вес символа двоичного алфавита, называется бит
Формулы для измерения количества информации в сообщениях i=log 2(1/p) Формула К. Шеннона H=p 1 log 2(1/p 1)+p 2 log 2(1/p 2)+…+p. Nlog 2(1/p. N) Формула Р. Хартли H – средняя информативность символа алфавита мощности N, pk – частота встречаемости k-символа алфавита i=log 2 N Единицы измерения информации 1 байт = 8 бит 1 Килобайт = 210 байт = 1024 байт 1 Мегабайт = 210 Кбайт = 1024 Кбайт 1 Гигабайт = 210 Мбайт = 1024 Мбайт 1 Терабайт = 210 Гбайт = 1024 Гбайт 1 Петабайт = 210 Тбайт = 1024 Тбайт К, Т, М, Г, П пишутся с большой буквы Структурно-логическая схема алфавитного подхода к измерению информации