По Шеннону, информация – уменьшение неопределенности наших знаний

Неопределенность некоторого события – это количество возможных исходов данного события (N).

1 бит – объем информации сообщения, которое уменьшает неопределенность знания в два раза.

N = 2i

Эта формула носит название формулы Хартли. Получена она в 1928 г. американским инженером Р. Хартли.

Например, если из 256 одинаковых, но разноцветных шаров наугад выбрали один, то сообщение о том, что выбрали красный шар несет 8 бит информации (28=256).

Формула Шеннона

Формулу для вычисления количества информации для событий с различными вероятностями предложил К.Шеннон в 1948 году. В этом случае количество информации определяется по формуле:,

где I – количество информации,

N – количество возможных событий,

pi - вероятности отдельных событий.

Измерение информации: единицы измерения, скорость информационного обмена. Алфавитный подход.

Алфавитный подход (кибернетический).

Согласно Колмагорову, информативность последовательности символов не зависит от содержания сообщения, а определяется минимально необходимым количеством символов для ее кодирования. Алфавитный подход является объективным. Смысл сообщения учитывается на этапе выбора алфавита кодирования либо не учитывается вообще.

Объективным способом измерения информации является алфавитный подход т.е. он не зависит от субъекта, воспринимающего сообщение. Только алфавитный подход пригоден при использовании технических средств работы с информацией. В этом случае количество информации зависит от объема текста и от мощности алфавита.

Мощность алфавита – это число символов в нем.

Количество информации, содержащейся в символьном сообщении, равно

I=К×i

К – число символов в тексте сообщения

 i – информационный вес символа

 

 

 который находится из уравнения

2i=N

N – мощность используемого алфавита.

 

1 байт = 8 бит = 1 символу.

4. Дискретное (цифровое) представление текстовой и видеоинформации. и 5. Дискретное (цифровое) представление графической и звуковой информации.

Процесс превращения непрерывного сигнала в набор кодовых слов называется аналого-цифровым преобразованием.

Это сложный процесс, состоящий из:

дискретизации, – это преобразование непрерывных изображений и звука в набор дискретных значений в форме кодов

квантования, когда величина каждого отсчёта заменяется округленным значением ближайшего уровня;

кодирования, когда каждому значению уровней квантования, полученных на предыдущем этапе, сопоставляются их порядковые номера в двоичном виде.

Дискретная – скачкообразная информация.

Человек способен воспринимать и хранить информацию в форме образов (зрительных, звуковых, осязательных, вкусовых и обонятельных). Зрительные образы могут быть сохранены в виде изображений (рисунков, фотографий и так далее), а звуковые — зафиксированы на пластинках, магнитных лентах, лазерных дисках и так далее.

Информация, в том числе графическая и звуковая, может быть представлена в аналоговой или дискретной форме. При аналоговом представлении физическая величина принимает бесконечное множество значений, причем ее значения изменяются непрерывно. При дискретном представлении физическая величина принимает конечное множество значений, причем ее величина изменяется скачкообразно.

Примером дискретного представления графической информации может служить, например, — изображение, напечатанное с помощью струйного принтера и состоящее из отдельных точек разного цвета

Примером дискретного хранения звуковой информации — аудиокомпакт-диск (звуковая дорожка которого содержит участки с различной отражающей способностью).

6. Представление информации в различных системах счисления: понятие СС, позиционная/ непозиционная СС, основание СС. Перевод чисел из одной СС в другую. и 7. Представление информации в различных системах счисления: понятие СС, позиционная/ непозиционная СС, основание СС. Арифметические операции в СС.

Понятие СС

Система счисления – это знаковая система, в которой числа записываются по определенным правилам с помощью символов некоторого алфавита, называемых цифрами.

Под системой счисления понимается совокупность способов изображения чисел с помощью ограниченного набора символов (цифр), имеющих определенное количественное значение.

Позиционная/ непозиционная СС, основание СС.

Непозиционная система счисления – это такая система счисления, в которой значение цифры не зависит от ее положения в числе.

Например, в известной римской системе, использующей набор символов I, V, X, L, С, В,..., десятичное число 38 представляется ХХХVIII=10+10+10+5+1+1+1.

В непозиционных системах счисления не представляются дробные и отрицательные числа, действия над числами связаны с большими трудностями и не имеют правил, поэтому используются только для наименования знаменательных дат, томов, разделов и глав в книгах.

 

Позиционная система счисления – это такая система счисления, в которой значение цифры зависит от ее положения в числе.

Для позиционных систем счисления характерным и определяющим является наличие ос-нования системы, которое показывает, во-первых, во сколько раз изменяется количественное значение цифры при перемещении ее на соседнюю позицию и во-вторых, какое число различных цифр входит в ограниченный набор, называемый алфавитом системы счисления.

333, 555

Основание СС

Основанием системы счисления может быть любое целое число не менее 2. Наименование системы счисления соответствует ее основанию (десятичная, двоичная и т.д.). В десятичном числе

         А10 = 552,25 = 5*102 +2*100 +2*10-1 +5*10-2

цифры 5 и 2, находящиеся на разных позициях, имеют различные количественные значения, при перемещении цифры на следующую позицию ее величина изменяется в 10 раз. Алфавит включает 10 цифр от 0 до 9, т.е. основание системы равно 10.

 

 


Понравилась статья? Добавь ее в закладку (CTRL+D) и не забудь поделиться с друзьями:  



double arrow
Сейчас читают про: