Опубликован: 11.04.2007 | Уровень: специалист | Доступ: свободно
Лекция 7:
Подстановочные или словарно-ориентированные алгоритмы сжатия информации. Методы Лемпела-Зива
Аннотация: История происхождения, положительные и отрицательные стороны, сравнение и применение на практике таких алгоритмов, как: LZ77, LZ78, LZSS, LZW. Практические задания для укрепления основного материала лекции. Особенности программ архиваторов. Непосредственное применение алгоритмов кодирования в архиваторах для обеспечения продуктивной работы в MS-DOS и WINDOWS
Ключевые слова: кодирование, статистическими, алгоритм, указатель, килобайт, байт, буфер, декодирование, поиск, длина, ASCII, бит, подстрока, LZW, инициализация, входной, очередной символ, значение, IBM, патент, цикла, ARJ, PKZIP, файл, фирма, Web, информация, byte, программа, RLE, run-length encoding, MS-DOS, Windows
Методы Шеннона-Фэно, Хаффмена и арифметическое кодирование обобщающе называются статистическими методами. Словарные алгоритмы носят более практичный характер. Их частое преимущество перед статистическими теоретически объясняется тем, что они позволяют кодировать последовательности символов разной длины. Неадаптивные статистические алгоритмы тоже можно использовать для таких последовательностей, но в этом случае их реализация становится весьма ресурсоемкой.
Алгоритм LZ77 был опубликован в 1977 г. Разработан израильскими математиками Якобом Зивом (Ziv) и Авраамом Лемпелом (Lempel). Многие программы сжатия информации используют ту или иную модификацию LZ77. Одной из причин популярности алгоритмов LZ является их исключительная простота при высокой эффективности сжатия.
Основная идея LZ77 состоит в том, что второе и последующие вхождения некоторой строки символов в сообщении заменяются ссылками на ее первое вхождение.
LZ77 использует уже просмотренную часть сообщения как словарь. Чтобы добиться сжатия, он пытается заменить очередной фрагмент сообщения на указатель в содержимое словаря.
LZ77 использует "скользящее" по сообщению окно, разделенное на две неравные части. Первая, большая по размеру, включает уже просмотренную часть сообщения. Вторая, намного меньшая, является буфером, содержащим еще незакодированные символы входного потока. Обычно размер окна составляет несколько килобайт, а размер буфера - не более ста байт. Алгоритм пытается найти в словаре (большей части окна) фрагмент, совпадающий с содержимым буфера.
Алгоритм LZ77 выдает коды, состоящие из трех элементов:
- смещение в словаре относительно его начала подстроки, совпадающей с началом содержимого буфера;
- длина этой подстроки;
- первый символ буфера, следующий за подстрокой.
Пример. Размер окна - 20 символ, словаря - 12 символов, а буфера - 8.
Кодируется сообщение "ПРОГРАММНЫЕ ПРОДУКТЫ ФИРМЫ MICROSOFT".
Пусть словарь уже заполнен. Тогда он содержит строку "ПРОГРАММНЫЕ ",
а буфер - строку "ПРОДУКТЫ".
Просматривая словарь, алгоритм обнаружит, что совпадающей
подстрокой будет "ПРО", в словаре она расположена со смещением 0 и имеет
длину 3 символа, а следующим символом в буфере является "Д". Таким образом,
выходным кодом будет тройка <0,3,'Д'>. После этого алгоритм сдвигает влево
все содержимое окна на длину совпадающей подстроки 
и
одновременно
считывает столько же символов из входного потока в буфер. Получаем в словаре
строку "РАММНЫЕ ПРОД", в буфере - "УКТЫ ФИР".
В данной ситуации совпадающей подстроки обнаружить не удаться и алгоритм
выдаст код <0,0,'У'>, после чего сдвинет окно на один символ.
Затем словарь будет содержать "АММНЫЕ ПРОДУ", а буфер - "КТЫ ФИРМ".
И т.д.
Декодирование кодов LZ77 проще их получения, т.к. не нужно осуществлять поиск в словаре.
Недостатки LZ77:
- с ростом размеров словаря скорость работы алгоритма-кодера пропорционально замедляется;
- кодирование одиночных символов очень неэффективно.
Кодирование одиночных символов можно сделать эффективным, отказавшись от ненужной ссылки на словарь для них. Кроме того, в некоторые модификации LZ77 для повышения степени сжатия добавляется возможность для кодирования идущих подряд одинаковых символов.
Пример. Закодировать по алгоритму LZ77 строку "КРАСНАЯ КРАСКА".
В последней строчке, буква "А" берется не из словаря, т.к. она последняя.
Длина кода вычисляется следующим образом: длина подстроки не может
быть больше размера буфера, а смещение не может быть больше размера
словаря 
. Следовательно, длина двоичного кода смещения будет
округленным в большую сторону 
размер словаря 
, а
длина двоичного кода для длины подстроки будет округленным в большую
сторону размер буфера 
. А символ кодируется
8 битами (например,
ASCII+).
В последнем примере длина полученного кода равна 
бит, против 
бит исходной длины строки.
В 1982 г. Сторером (Storer) и Шиманским (Szimanski) на базе LZ77 был разработан алгоритм LZSS, который отличается от LZ77 производимыми кодами.
Код, выдаваемый LZSS, начинается с однобитного префикса, различающего собственно код от незакодированного символа. Код состоит из пары: смещение и длина, такими же как и для LZ77. В LZSS окно сдвигается ровно на длину найденной подстроки или на 1, если не найдено вхождение подстроки из буфера в словарь. Длина подстроки в LZSS всегда больше нуля, поэтому длина двоичного кода для длины подстроки - это округленный до большего целого двоичный логарифм от длины буфера.
Пример. Закодировать по алгоритму LZSS строку "КРАСНАЯ КРАСКА".
Здесь длина полученного кода равна 
бит.
LZ77 и LZSS обладают следующими очевидными недостатками:
- невозможность кодирования подстрок, отстоящих друг от друга на расстоянии, большем длины словаря;
- длина подстроки, которую можно закодировать, ограничена размером буфера.
