Cтраница 1
Формула Хартли имеет вполне очевидную аналогию с формулой Больцмана, которая, как известно, устанавливает функциональную связь между энтропией и вероятностью. Роль формулы Больцмана в развитии современной науки весьма велика. [1]
По формуле Хартли получим Н Iog2 27 4 76 бит. [2]
В формуле Хартли выбор основания логарифмов означает выбор единиц, в к-рых измеряется неопределенность. [3]
В формуле Хартли выбор основания логарифмов означает выбор единиц, в к-рых измеряется неопределенность. Когда исходы нерав-новероятны, то неопределенность зависит не только от числа исходов, но и от их вероятностей. [4]
Согласно формуле Хартли, энтропия ( степень неопределенности) буквы равна Щ Iog2 32 5 бит. Так как вероятности появления всех букв в данном опыте равны, то энтропия Щ есть максимальная энтропия буквы; она соответствует наибольшему беспорядку в системе текст на основе русского алфавита. Понятно, что такой текст ни в какой мере не похож на обычный текст, который используется на практике. Его даже озвучить невозможно, не говоря уже о явной бессмысленности написанного. [5]
В формуле Хартли выбор основания логарифмов означает выбор единиц, в которых измеряется неопределенность. [6]
Это и есть формула Хартли - Кранка. [7]
Эта формула получила название формулы Хартли и показывает, что количество информации, необходимое для снятия неопределенности о системе с равновероятными состояниями, зависит лишь от количества этих состояний. [8]
Второй вариант формулы Шеннона и формула Хартли удобнее при оценке количества информации применительно к автоматизированным системам управления производством и технологическими процессами. [9]
Ее максимум достигается, как мы уже знаем, когда все N возможных значений элементарного сигнала равновероятны; он составляет, согласно формуле Хартли ( 2), log2Arбит / элементарный сигнал. [10]
Итак, емкость канала ограничивается двумя величинами: шириной полосы канала и шумом. Соотношение (8.25) известно как формула Хартли - Шеннона и считается основной в теории информации. Полоса частот и мощность сигнала входят в формулу таким образом, что для С const при сужении полосы необходимо увеличивать мощность сигнала, и наоборот. [11]
При каком условии формула Шеннона переходит в формулу Хартли. [12]
Известно большое количество работ, посвященных физической трактовке информации. Эти работы в значительной мере построены на основе аналогии формулы Больцмана, описывающей энтропию статистической системы материальных частиц, и формулы Хартли. [13]
В качестве примера определим количество информации, связанное с появлением каждого символа в сообщениях, записанных на русском языке. Будем считать, что русский алфавит состоит из 33 букв и знака пробел для разделения слов. По формуле Хартли Н Iog2 34 5 09 бит. [14]
Воспользуемся для подсчета Н формулой Шеннона: Н 4 72 бит. Величина Н, вычисляемая по формуле Хартли, является максимальным количеством информации, которое могло бы приходиться на один знак. [15]