ИЗБЫТОЧНОСТЬ ИНФОРМАЦИИ

величина, которой измеряется относительная доля излишне используемых сообщений в некотором алфавите. Определяется формулой: где Н — энтропия сообщения, п — средняя длина кодового слова, М — число символов алфавита. Естественным языкам свойственна значительная И. и. (напр., для русского языка 0,5 — 0,8). Для уменьшения И. и. применяются методы, разрабатываемые в теории кодирования. И. и. может быть естественной (напр., в естественных языках) и искусственной. Последняя специально вводится для улучшения помехоустойчивости и надежности передачи и хранения информации. В общем случае И. и. оказывает двоякое влияние на характеристики информационных систем (в т. ч. и на процессы переработки информации человеком). С одной стороны, И. и. существенно повышает ее помехоустойчивость, дает возможность восстановить искаженную информацию. Напр., искажение или потеря отдельных букв, слов, а иногда и фраз позволяет правильно распознать смысл письменного или устного сообщения; искажение состояния одного, двух сегментов знакосинтезирующих цифровых индикаторов в ряде случаев позволяет восстановить истинные значения отображаемой цифры и т. д. Примером избыточности в информационных структурах мозга является парность некоторых анализаторов (зрительного, слухового), что повышает надежность их работы. Избыточную информацию не следует путать с иррелевантной, которая мешает нормальной работе оператора. Существуют три основных способа введения избыточности: 1) многократное повторение информации; 2) введение в дискретные сигналы дополнительных элементов; 3) метод избыточных переменных. С другой стороны, И. и. усложняет систему, увеличивает время обработки информации, снижает реальную пропускную способность каналов связи. Для ее уменьшения в этом случае исцользуют оптимальное кодирование. Поэтому определение необходимой И. и. решается в каждом конкретном случае, исходя из особенностей решаемой задачи и возможных ограничений.