МарГТУ,1 курс, Количественная оценка информации, вычисление
скорости передачи информации и пропускной способности каналов
связи, определение избыточности сообщений, оптимальное кодирование.
Практическая часть - программа, блок-схема и т. д.
Эффективное кодирование. Общая характеристика эффективного кодирования. Методика Шеннона – Фэно. Кодирование блоками. Методика Хаффмена. Префиксные коды. Упражнения и задачи. Помехоустойчивое кодирование. Общая характеристика помехоустойчивых кодов. Кодовое расстояние и корректирующая способность кода. Линейные групповые коды. Код Хемминга: идея построения. Групповой код. Принцип формирования образующей матрицы. Циклические коды. Идея построения...
НГУ (Украина), преподаватель доц. Кожевников А. В. Контрольная для заочников. Расчет значения вероятностей появления N=10 сообщений, генерируемых источником. Соотношения для расчета вероятностей: pi=P(1-P)i-1/1-(1-P)N i=1, …,N P=1/(№div5+2) Построение кодов сообщений согласно алгоритмам Хаффмена и Шеннона-Фено. Определение математического ожидания длин кодовых слов при использовании оптимальных алгоритмов, длины кодового слова при использовании...
НТУУ КПИ Факультет: ФЭЛ (ИПСА) Кафедра: САПР (СП) Преподаватель: Капшук Специальность: Информационные технологии проектирования Дисциплина: Методы и средства компьютерных информационных технологий (3 курс) Страниц: 24 + файлы исходных текстов программ (Borland Pascal) Основное содержание работы - разработка программы-архиватора, реализующего упаковку/распаковку файлов с помощью методов сжатия Хаффмена и "код Шеннона-Фано" (КШФ). Программа также...
Автор неизвестен. Тамбовский государственный технический университет. г. Тамбов, 2010 год. - 50 страниц. Понятие видов информации. Основные понятия комбинаторики. Случайные модели в теории информации. Основные понятия теории информации. Меры информации. Классификация мер информации. Энтропия вероятностной схемы. Основные свойства энтропии. Аксиомы Хинчена и Фадеева. Источники информации и их энтропия. Дискретные источники без памяти и с памятью....
Конспект лекций, отредактированный в соответствии с зачётными вопросами. Вопросы также прилагаются. Теория информации Сигналы и некоторые их характеристики. Квантование по уровню. Квантование по времени. Квантование по уровню и по времени. Семантическая и синтаксическая информация. Энтропия и количество информации. Информационные характеристики квантованного сигнала. Пропускная способность канала передачи информации при отсутствии помех. Пропуск...
Конспект лекций. – Петрозаводск, ПетрГУ, 2009г. - 20 стр. Кафедра инф. -изм. систем и физической электроники. Содержание. Неравенство Рао - Крамера. Понятие информации по Шенону. Получение информации о системе A в опыте B. Информационные характеристики источников информации и каналов связи. Информационные характеристики канала передачи данных. Кодирование информации. Эффективное кодирование. 1. Код Шеннона – Фано. 2. Код Хафмана. Теоремы Ш...
Основы теории информации. Необходимые сведения из теории вероятности. Энтропия как мера неопределенности опыта. Свойства энтропии и информации. Эмпирическая энтропия и число сочетаний. Побуквенное кодирование. Префиксные коды и неравенство Крафта. Префиксные коды натурального ряда. Нумерация двоичных слов заданного веса. Стоимость и избыточность кодирования. Теорема Шеннона. Префиксные коды Шеннона, Гильберта-Мура, Шеннона-Фано. Оптимальное кодир...
Расчетно-графическая работа по системотехнике на тему: «Анализ энтропийных характеристик текстовых файлов» Задача: рассчитать энтропию 4-ох текстов (2- английского содержания, 2- русского), сравнить их значения и сделать вывод. В приложение таблица символов и график распределения вероятностей.
ФИВТ МФТИ, весна 2010, 14 с. Определение информации по Хартли Детские задачи Энтропия Шеннона Энтропии пар и троек случайных функций Энтропия Шеннона и экономные коды Равномерный блоковый код для канала без шума. Коды Хэмминга Коммуникационная сложность Колмогоровская сложность Колмогоровская сложность и алгоритмическая случайность
Отличная шпаргалка по теории информации, на зачет. 30 вопросов (3 не отвечено"Может быть, Вам не попадется!"). Препод Фрид А.И. Понятие информации. Свойства информации.Знаки и сигналы. Сигнал, его характеристики. Квантование сигналов.Синтаксическая и семантическая информация. Энтропия и ее свойства. Количество информации.Энтропия непрерывных сообщений. Условная энтропия и взаимная информация - дискретные системы передачи информации.Условная энтро...