1.9.3. Из истории создания теории информации
Применение теории информации дает возможность получить численные оценки, характеризующие состояние и поведение систем управления, систем передачи и преобразования информации, систем обработки и отображения информации.
Теория информации была создана как наука, предназначенная для решения проблем связи (передачи информации). Основополагающими работами в этой области явились исследования В.А.Котельникова, К.Шеннона, А.Н.Колмогорова, Н.Винера. Огромное значение в применении методов теории информации к непрерывным сигналам имела теорема В.А.Котельникова, согласно которой сигналы с ограниченным спектром полностью определяются совокупностью своих дискретных значений, взятых через определенные равные интервалы времени.
Задаче достоверного воспроизведения сигналов при передаче посвящены работы К.Шеннона, развившего теорию помехо-устойчивого кодирования; В.А. Котельникова, разработавшего основы теории потенциальной помехоустойчивости; А.Н.Колмогорова, разработавшего методы экстраполяции и интерполяции случайных последовательностей. На основе разработанных методов Н.Винером была поставлена и решена задача оптимальной линейной фильтрации. Эти работы имели фундаментальное значение не только для техники связи. На их базе созданы инженерные методы расчета измерительных устройств и информационных измерительных систем, систем сбора и обработки данных, систем управления. Эти работы используются для определения предельных возможностей автоматизированных систем управления различного назначения, определяемых пропускными способностями их элементов и функциональных узлов.