Классическая теория информации и еe ограничения
    Э.А. Соснин, Институт сильноточной электроники СО РАН, г. Томск
    Статья в краткой форме знакомит с парадоксами классической теории информации.
    "Информация это информация."
    Н. Винер
    "Всегда познавайте предмет в противоречиях. Вы обнаружите при этом, что существует постоянный заговор, имеющий целью преподать тот же предмет догматически и односторонне."
    Б. Шоу
    Термин "информация" стал активно использоваться в научной литературе, начиная с тридцатых-сороковых годов XX века. Тогда слово "информация" обозначало, в основном, "сведения" или "осведомление", то есть использовался прямой перевод латинского слова "informatio" (в оригинале латинское слово "informatio" переводится как "разъяснение" или "осведомление").
    К концу сороковых под "информацией" начали понимать функцию статистических характеристик букв какого-либо языка, и, согласно К. Шеннону [Шеннон К. Математическая теория связи // "К. Шеннон. Работы по теории информации и кибернетике". М.: ИИЛ, 1963. - С. 243-332.], количество информации, содержащееся в каком-либо сообщении, состоящем из М букв, могло быть вычислено по формуле:
    (1)
    где n - число букв в данном языке, а рj - частота встречаемости j -той буквы (j = 1,2....n) в этом языке. Знак минус поставлен перед правой частью формулы для того, чтобы количество информации B всегда было положительным.
    В восьмидесятые годы "информацией" уже называли "...обмен сведениями между людьми, человеком и автоматом, автоматом и автоматом", а также "обмен сигналами в животном и растительном мире; передачу признаков от клетки к клетке, от организма к организму" [Советский энциклопедический словарь. М.: Изд-во "Советская энциклопедия", 1981.- 505 с.].
    Под влиянием работ Л. Бриллюзна [Бриллюэн Л. Научная неопределенность и информация. М.:. "Мир", 1966. - 271 с.], начиная с шестидесятых годов, возник и приобрел широкую известность так называемый "негэнтропийный принцип информации". Сторонники этого принципа стали называть "информацией" не только содержательный и статистический аспекты сообщений, но и нечто, противоположное физической энтропии, - так называемую негэнтропию. В отличие от энтропии, рассматриваемой в качестве неупорядоченности той или иной системы, негэнтропией обычно называют меру упорядоченности окружающих нас систем, связывая с ней различного рода антиэнтропийные процессы, протекающие в физическом мире. В основе негэнтропийного принципа лежит внешнее сходство формулы К. Шеннона (1), обобщенной для любого единичного события
    (2),
    где К - коэффициент, а Р - вероятность этого события, и формулы Макса Планка для физической энтропии:
    (3),
    где К0 постоянная Больцмана, равная 1.4? 10-16 эрг? град-1, а W ? микросостояния системы, соответствующие данному ее макросостоянию.
    Л. Бриллюэн предложил выражать информацию I и энтропию S в одних и тех же единицах - информационных (битах) или энтропийных эрг·град-1. Тем самым, по его мнению, была получена возможность рассчитывать количество информации, зная энтропию системы, и, напротив, рассчитывать энтропию системы, зная количество содержащейся в ней информации. Столь широкая трактовка термина "информация" приводит, по существу, к невозможности его строгого определения, а, следовательно, и использования. ............