Подходы к определению количества информации.

 

1928 г. Хартли рассматривал процесс получения информации как выбор одного сообщения из множества N равновероятных сообщений, а количество информации i, содержащееся в выбранном сообщении, определял как двоичные логарифм N.

i=log2N

Клод Шеннон 1948г. предложил формулу, учитывающую возможную неодинаковую вероятность сообщений в наборе.

Если N-общее кол-во возможных исходов какого-либо процесса и из них интересующее нас событие может произойти К раз, то вероятность этого события равна: p=K/N

Количественная зависимость между вероятностью события и количеством информации в сообщении о нем выражается формулой:

i=log2(1/p)

32 шарика. 4 шарика желтые. Сколько информации будет нести то, что мы взяли шарик желтого цвета?

N=32

K=4

P=4/32=1/8

I=log2(9/1)=3

Единица измерения информации:

Бит – такое количество информации, которое позволяет выбрать 1 вариант из 2 возможных. Наименьшая «порция» памяти компа. 0 и 1.

1 байт = 8 бит

1 кб = 1024 байт

1 мб, 1 гб, 1 Тб.

 

Кодирование текстовой информации в компьютере.

 

Кодирование(001) – декодирование(1)

Система кодирования

(ASCLL) Американский стандартный код для обмена информации разработана в 1963 году Американской Ассоциацией Стандартов.

1 символ – 8 бит.

Первые 32 символа – управляющие символы (кнопки шифт, делит и тд)

Символы 32-127: интернациональные (лат. Алфавит, знаки препинания, мат.операции)

Символы 128-255: национальные (русский алфавит и тд)

 

Кодировка UNICODE

Разработана 1991 г. Организацией «Консорциум Юникода»

Юникод – промышленный стандарт, обеспечивающий цифровое представление симоволов всех письменностей мира.

1 символ кодируется 16 бит.

 

2^ i = N, где Н-количество символов в алфавите, и – количество инфомрации, содержащейся в одном символе алфавита.

I = K * i

КОЛИЧЕСТВО ИНФОРМАЦИИ В ТЕКСТЕ, где К- число символов в тексте, И-объем информации.

 

 

ВОПРОС.

Система счисления (СС) – изображение (запись) чисел с помощью различных знаков (цифр).

                                                                                                                                                                                                                            

                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                

 

Непозиционные СС.

Римская система счисления – для записи чисел используется буквы латинского алфавита.

Для записи используются 2 правила:

1) Каждый меньший знак поставленный слева от большего, вычитается из него. IV = 5-1=4

2) Каждый меньший знак, поставленный справа от большего прибавляется к нему. VI = 5+1=6

 

Позиционные СС.

Основание СС показывает, во сколько раз изменяется количественное значение цифры при перемещении на соседнюю позицию, и какое число различных цифр используется для записи любого числа.

Основанием СС может быть любое натуральное число >=2

База СС- последовательность цифр, используемая для записи любого числа.

 

        

 

 

ВОПРОС.

Система счисления (СС) – изображение (запись) чисел с помощью различных знаков (цифр).

                                                                                                                                                                                                                            

                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                                     

 

Непозиционные СС.

Римская система счисления – для записи чисел используется буквы латинского алфавита.

Для записи используются 2 правила:

1) Каждый меньший знак поставленный слева от большего, вычитается из него. IV = 5-1=4

2) Каждый меньший знак, поставленный справа от большего прибавляется к нему. VI = 5+1=6

 

Позиционные СС.

Основание СС показывает, во сколько раз изменяется количественное значение цифры при перемещении на соседнюю позицию, и какое число различных цифр используется для записи любого числа.

Основанием СС может быть любое натуральное число >=2

База СС- последовательность цифр, используемая для записи любого числа.