В теории информации в формуле для энтропии обычно используют двоичные логарифмы, тогда (энтропия и информация) измеряется в битах. Это удобно тем, что выбор между двумя равновероятными уровнями Xi (как в двоичном) сигнале характеризуется неопределенностью 1 бит. В популярной литературе иногда пользуются десятичными логарифмами и единицей энтропии является дит. В физике удобнее пользоваться натуральными логарифмами и единицей энтропии является нат (поскольку в дальнейшем наш подход существенно физический, мы также используем натуральные логарифмы). Выбор основания – лишь вопрос масштаба, в любом случае энтропия безразмерна. Возможная величина энтропии заключена в пределах:

0<= H(X)<= logN.

Это интересно:

Ноосфера в конце ХХ века: прогнозы и реалии
В книге "Научная мысль как планетное явление" В. И. Вернадский анализирует геологическую историю Земли и утверждает, что наблюдается переход биосферы в новое состояние - в ноосферу под действием новой геологической силы, научно ...

Семейство кошачьи. Ирбис
Ирбис или снежный барс обитает в горных районах Азии от Афганистана до западного Китая, в Гималаях, на Тибете, в горах Монголии, на Алтае. Это одно из самых высокогорных животных. Длина тела ирбиса 110 – 125 см, вес 20 – 40 кг. Если срав ...

Понятие «наука» (сущность, содержание, функции, цели, задачи, критерии выделения)
Наука – исторически сложившаяся форма человеческой деятельности направленная на познание и преобладание эффективной деятельности Наука – это рациональный способ познания мира основанный на эмпирической проверки и математических наук. Су ...