Описание:Рассматриваются понятия количества информации и энтропии распределения по Шеннону. Исследуются
свойства информации и энтропии больших последовательностей. На этой основе рассмотрены основные положения и результаты кодирования информации. Рассмотрены применения к оценке количества информации в речевому процессу.