Теория греч teoria рассмотрение исследование учение

Теория (греч. teoria — рассмотрение, исследование) — учение, система идей или принципов. Является совокупностью обобщенных положений, образующих науку или ее раздел. Информация – сведения, имеющие новизну и уменьшающие неопределенность

Клод Элвуд Шеннон (Shannon) (1916 — 2001) — американский инженер и математик. Человек, которого называют отцом современных теорий информации и связи.

Источники –приемники информации на основе радиосигналов

В. И. Дмитриев ПРИКЛАДНАЯ ТЕОРИЯ ИНФОРМАЦИИ Москва 1989

• • • • • • • ОГЛАВЛЕНИЕ § В. 1 О понятии «информация» § В. 2 Этапы обращения информации § В. 3 Информационные системы § В. 4 Система передачи информации (основные понятия и определения § В. 5 Уровни проблем передачи информации § В. 6 Теория информации Глава 1 Математические модели § 1. 1 Понятия сигнала и его модели § 1. 2 Формы представления детерминированных сигналов § 1. 3 Временная форма представления сигнала § 1. 4 Частотная форма представления сигнала § 1. 5 Соотношения между длительностью импульсов и шириной их спектров § 1. 6 Спектральная плотность мощности детерминированного сигнала § 1. 7 Функция автокорреляции детерминированного сигнала § 1. 8 Случайный процесс как модель сигнала § 1. 9 Стационарные и эргодические случайные процессы § 1. 10 Спектральное представление случайных сигналов § 1. 11 Частотное представление стационарных случайных сигналов Глава 2 Преобразование непрерывных сигналов в дискретные § 2. 1 Преимущества цифровой формы представления сигналов § 2. 2 Общая постановка задачи дискретизации § 2. 3 Способы восстановления непрерывного сигнала § 2. 4 Критерии качества восстановления § 2. 5 Методы дискретизации посредством выборок § 2. 6 Равномерная дискретизация Теорема Котельникова § 2. 7 Теоретические и практические аспекты использования теоремы Котельникова § 2. 8 Дискретизация по критерию наибольшего отклонения

• • § 2. 9 Адаптивная дискретизация § 2. 10 Квантование сигналов § 2. 11 Квантование сигналов при наличии помех § 2. 12 Геометрическая форма представления сигналов • • Глава 3 Количественная оценка информации § 3. 1 Энтропия как мера неопределенности выбора § 3. 2 Свойства энтропии § 3. 3 Условная энтропия и ее свойства § 3. 4 Энтропия непрерывного источника информации (дифференциальная энтропия § 3. 5 Свойства дифференциальной энтропии § 3. 6 Количество информации как мера снятой неопределенности § 3. 7 Эпсилон энтропия случайной величины • • Глава 4. Информационные характеристики источника сообщений и канала связи. § 4. 1 Основные понятия и определения§ 4. 2 Информационные характеристики источника дискретных сообщений § 4. 3 Информационные характеристики дискретных каналов связи § 4. 4 Информационные характеристики источника непрерывных сообщений § 4. 5 Информационные характеристики непрерывных каналов связи § 4. 6 Согласование § 4. 7 Согласование статистических свойств источника сообщений и канала связи • • Глава 5. Кодирование информации при передаче по дискретному каналу без помех § 5. 1 Кодирование как процесс выражения информации в цифровом виде§ 5. 2 Технические средства представления информации в цифровой форме § 5. 3 Кодирование как средство криптографического закрытия информации

• • § 5. 4 Эффективное кодирование § 5. 5 Технические средства кодирования и декодирования эффективных кодов • Глава 6. Кодирование информации при передаче по дискретному каналу с помехами § 6. 1 Основная теорема Шеннона о кодировании для канала с помехами § 6. 2 Разновидности помехоустойчивых кодов § 6. 3 Блоковые коды § 6. 4 Построение двоичного группового кода § 6. 5 Технические средства кодирования и декодирования для групповых кодов § 6. 6 Построение циклических кодов § 6. 7 Выбор образующего многочлена по заданному объему кода и заданной корректирующей способности§ 6. 8 Технические средства кодирования и декодирования для циклических кодов§ 6. 9 Коды Боуза —Чоудхури—Хоквингема § 6. 10 Итеративные коды § 6. 11 Сверточные коды Заключение Список литературы • • •

ГОСУДАРСТВЕННОЕ ОБРАЗОВАТЕЛЬНОЕ УЧРЕЖДЕНИЕ ВЫСШЕГО ПРОФЕССИОНАЛЬНОГО ОБРАЗОВАНИЯ КГТУ Филиал КГТУ в г. Железногорске КАФЕДРА АВТОМАТИЗИРОВАННЫХ СИСТЕМ ОБРАБОТКИ ИНФОРИМАЦИИ И УПРАВЛЕНИЯ ТЕОРИЯ ИНФОРМАЦИИ (НАЧАЛЬНЫЙ КУРС ЛЕКЦИЙ) Учебное пособие на 225 листах Железногорск, 2006