Согласование потока информации от источника и пропускной способности канала

Поток информации определяется как среднее количество информации, которое источник вырабатывает в единицу времени (бит/с). Зная среднюю длительность выработки одного символа t_z и его среднюю информативность H_z, величину потока можно рассчитать как

(2)

Очевидно, что величину потока следует согласовывать с пропускной способностью канала C таким образом, чтобы с одной стороны, вся вырабатываемая источником информация успевала передаваться, а с другой – возможности канала использовались бы как можно полнее. Поскольку величина определяется особенностями источника и в этом смысле является заданной, единственным «инструментом» согласования остается величина t_z, а значит – кодирование символов источника, которое определяет среднюю длину кода, и вслед за ней величину .

Клод Шеннон доказал следующую важную теорему.

Дата добавления: 2014-01-11