Читайте также:
|
Измерения обеспечивают получение информации о значениях измеряемой физической величины – измерительной информации, и, следовательно, увеличивают наши знания (уменьшают их неопределенность) о количественных характеристиках свойств объектов.
Понятие информации имеет обобщенный философский смысл и отражает одно из объективных свойств материального мира. Не случайно основная ее идея заключается в том, что с информацией можно обращаться также, как с такими физическими величинами, как масса и энергия. Здесь имеется в виду, что информацию, как и энергию, можно извлекать, передавать, преобразовывать к виду, удобному для использования.
Количество информации в сообщении, которое содержит сведения об объекте, определяется величиной, обратной вероятности сообщения и вычисленной в логарифмических единицах:
- вероятность сообщения.
Оценку информационных свойств сообщения в целом осуществляют с помощью специальной характеристики, которая называется энтропия H. Она характеризует среднее количество информации, приходящее на одно сообщение.
В общем случае для N разных событий, характеризующихся своими вероятностями и определенным количеством информации о каждом из них, для определения количества информации, которое содержится в единичном сообщении, нужно найти математическое ожидание количества информации о каждом из событии или провести усреднение с учетом P(x):
Энтропия источника измеряется в двоичных единицах или в битах на сообщение.
Дата добавления: 2015-02-16; просмотров: 109 | Поможем написать вашу работу | Нарушение авторских прав |