Статья в Энциклопедическом Фонде

Энтропия

Демон Максвелла
Изображение со страницы http://nature.web.ru

Энтропия (греч. ἐντροπία  поворот, превращение). Понятие энтропии впервые было введено в термодинамике для определения меры необратимого рассеяния энергии.
Энтропия применяется в статистической физике как мера вероятности осуществления какого-либо макроскопического состояния, в теории информации - как мера неопределенности какого-либо опыта (испытания).

В современном виде впервые понятие "энтропия" ввел Клод Шеннон. В его понимании концепции информации и энтропии имеют глубокие связи друг с другом. Шеннон выдвинул гипотезу о том, что прирост информации равен утраченной неопределенности (энтропии).


Видео
Энциклопедический Фонд