Математическая теория информации

19 Января 2012 в 14:02, реферат

аждое сообщение несет в себе определенное количество информации. Определим количество информации, содержащееся в сообщении xi, выбранном из ансамбля сообщений источника {Х, р(х)}. Одним из параметров, характеризующих данное сообщение, является вероятность его появления - p(xi), поэтому естественно предположить, что количество информации I(xi) в сообщении xi является функцией p(xi). Вероятность появления двух независимых сообщений x1 и x2 равна произведению вероятностей p(x1, x2) = p(x1).p(x2), а содержащаяся в них информация должна обладать свойством аддитивности, т. е.:
I(x1, x2) = I(x1)+I(x2). (1)
Поэтому для оценки количества информации предложена логарифмическая мера:
. (2)
При этом, наибольшее количество информации содержат наименее вероятные сообщения, а количество информации в сообщении о достоверном событии равно нулю. Т. к. все логарифмы пропорциональны, то выбор основания определяет единицу информации: logax = logbx/logba.
В зависимости от основания логарифма используют следующие единицы информации:
2 - [бит] (bynary digit – двоичная единица), используется при анализе ин-формационных процессов в ЭВМ и др. устройствах, функционирующих на основе двоичной системы счисления;
e - [нит] (natural digit – натуральная единица), используется в математических методах теории связи;
10 -[дит] (decimal digit – десятичная единица), используется при анализе процессов в приборах работающих с десятичной системой счисления.

Теория вероятности и математическая статистика

19 Октября 2010 в 12:49, лекция

Предмет теории вероятностей. Случайные события и вероятности событий

Теория графов. Математическая логика и теория типов

17 Октября 2011 в 21:14, реферат

В широком смысле информа́тика (ср. со сходными по звучанию и происхождению нем. Informatik и фр. Informatique, в противоположность традиционному англоязычному термину англ. computer science — наука о компьютерах - в США или англ. computing science — вычислительная наука -в Британии есть наука о вычислениях, хранении и обработке информации. Она включает дисциплины, так или иначе относящиеся к вычислительным машинам: как абстрактные, вроде анализа алгоритмов, так и довольно конкретные, например, разработка языков программирования

Лекции по "Теории поверхностей и математической статистике"

05 Марта 2013 в 19:29, курс лекций

Простая поверхность – множество, которое является связным, каждая точка этого множества имеет окрестность такую, что та часть окрестности, которая принадлежит данному множеству, является элементарной поверхностью.
Сфера, эллипсоид являются простыми поверхностями, но не являются элементарными поверхностями.
Поверхности с постоянной гауссовой кривизной локально изометричны в том случае, когда они имеют одинаковые гауссовы кривизны.

Шпаргалка по "Теория вероятностей и математическая статистика"

11 Октября 2011 в 19:28, шпаргалка

Работа содержит ответы на вопросы по курсу "Теории вероятностей и математической статистике".

Теория вероятностей, математическая статистика и случайные процессы

15 Января 2012 в 13:51, контрольная работа

Случайные события.
Случайные величины.
Элементы математической статистики.
Цепи Маркова.

Контрольная работа по "Теории вероятности и математической статистике"

17 Января 2013 в 10:50, контрольная работа

Задача 1. В мастерскую для ремонта поступило 10 пар часов фирмы "Заря". Известно, что 6 пар из них нуждаются в общей чистке механизма. Мастер берет первые попавшиеся 5 пар часов. Определить вероятность того, что из них нуждаются в общей чистке: а) 2 пары часов; б) не менее четырех пар часов.
Задача 2. В студии телевидения имеется 3 телевизионных камеры. Вероятность того, что включена первая камера, равна 0,6; вторая камера - 0,8; третья камера - 0,7. Найти вероятность того, что в данный момент включены хотя бы 2 камеры.

Контрольная рабоат по "Теории вероятности и математическая статистика"

18 Марта 2011 в 20:35, контрольная работа

Работа содержит восемь задач и их решения по курсу "Теория вероятности и математическая статистика".

Контрольная работа по "Теории вероятности и математической статистике"

21 Октября 2013 в 21:21, контрольная работа

4.4.7. Производится два независимых выстрела по мишени. Вероятность попадания при каждом выстреле равна p. Рассматриваются случайные величины: Х - разность между числом попаданий и числом промахов; Y - сумма числа попаданий и числа промахов. Найти закон распределения для каждой случайной величины X, Y, M(X), D(X), M(Y), D(Y).
4.5.7. Случайная величина Х в интервале (-3, 3) задана плотностью распределения . Вне этого интервала . Найти коэффициент a, функцию распределения . Что вероятнее: в результате испытания окажется X<1 или X>1?

Контрольная работа по "Теории вероятностей и математическая статистика"

04 Апреля 2013 в 22:07, контрольная работа

Работа содержит задания по дисциплине "Теория вероятностей и математическая статистика" и ответы на них