Энтропия и информация

Важнейшим шагом на пути постижения природы и механизмов антиэнтропийных процессов следует введение количественной меры информации. Первоначально эта мера предназначалась лишь для решения сугубо прикладных задач техники связи. Однако последующие исследования в области физики и биологии позволили выявить универсальные меры, предложенные К.Шенноном, позволяющие установить взаимосвязь между количеством информации и физической энтропией и в конечном счете определить сущность новой научной интерпретации понятия "информация" как меры структурной упорядоченности самых разнообразных по своей природе систем .

1.Введение ………………………………………………………..............................3-4
2.Основная часть
2.1 Понятие энтропии и информации ………………................5-6
2.2 Основа информационной теории ………………………...7-12
2.3 Информационная энтропия……………………………….13-15
2.4 Свойства и эффективность………………………………..16-17
2.5 Вариации и обобщения……………………………………………..18-21

3.Заключение …………………………………………………………………………………22
4.Список используемой литературы……………