LZ4 Компрессор/Декомпрессор

LZ4 — это алгоритм сжатия без потерь, принадлежащий к семейству LZ77. Он отдает приоритет скорости сжатия и распаковки над коэффициентом сжатия. В то время как такие алгоритмы, как Gzip или Brotli, достигают лучших коэффициентов сжатия, LZ4 может сжимать со скоростью более 500 МБ/с и распаковывать со скоростью более 1 ГБ/с, что делает его идеальным для сценариев, где скорость важнее уменьшения размера файла.

LZ4 лучше всего подходит для приложений реального времени, где задержка имеет решающее значение — таких как системы хранения данных, сжатие файлов журналов, сжатие сетевых пакетов и кэширование в памяти. Gzip обеспечивает лучшие коэффициенты сжатия для архивирования файлов, а Zstandard обеспечивает промежуточный вариант между скоростью и коэффициентом. Выбирайте LZ4, когда скорость распаковки является основной проблемой.

LZ4 не является оптимальным выбором для долгосрочного архивирования, где основное внимание уделяется месту для хранения. Его коэффициент сжатия обычно составляет от 2:1 до 3:1 по сравнению с 5:1 или выше с использованием таких алгоритмов, как LZMA или Brotli. Однако LZ4 превосходно работает в сценариях, требующих частых циклов сжатия и распаковки, таких как моментальные снимки баз данных или конвейеры данных в реальном времени.

Формат LZ4 frame — это контейнерный формат, который оборачивает сжатые данные LZ4 метаданными, включая контрольные суммы, подсказки о размере содержимого и конфигурацию блоков. Он обеспечивает потоковую распаковку и проверку целостности данных. Формат frame является стандартным способом хранения и передачи сжатых данных LZ4, в отличие от необработанного блочного сжатия LZ4, которому не хватает этих функций безопасности.