ZIP

Эта статья находится на начальном уровне проработки, в одной из её версий выборочно используется текст из источника, распространяемого под свободной лицензией
Материал из энциклопедии Руниверсалис
ZIP
Расширение .zip
.zipx (новые алгоритмы сжатия)
MIME-тип application/zip[1]
Сигнатура нет, хотя обычно PK\003\004 , PK\005\006 (empty archive) или PK\007\008 (архив, разделённый на части).
Разработчик Фил Кац, PKWARE
Опубликован 1989
Последний выпуск 6.3.9 (15 июля 2020; 3 года назад (2020-07-15))
Тип формата Сжатие данных
Развит в JAR (EAR, RAR (Java), WAR)
Office Open XML (Microsoft)
Open Packaging Conventions
OpenDocument (ODF)
XPI (расширения Mozilla)
Стандарт(ы) APPNOTE от PKWARE

ZIP — формат архивации файлов и сжатия данных без потерь. Архив ZIP может содержать один или несколько файлов и каталогов, которые могут быть сжаты разными алгоритмами. Наиболее часто в ZIP используется алгоритм сжатия Deflate. Формат был создан в 1989 году Филом Кацем и реализован в программе PKZIP компании PKWARE[2] в качестве замены формату архивов ARC Тома Хендерсона. Формат ZIP поддерживается множеством программ, в том числе операционными системами Microsoft Windows (с 1998 года) и Apple Mac OS X (с версии 10.3). Многие свободные операционные системы также имеют встроенную поддержку ZIP-архивов.

Архивы ZIP обычно хранятся в виде файлов с расширением «.zip» или «.ZIP» и используют MIME-типapplication/zip.[1]. Для создания ZIP-архивов и извлечения (распаковки) содержащихся в них файлов могут использоваться специальные утилиты, например терминальные PKZIP и PKUNZIP[3] или графические WinZip, WinRAR, Info-ZIP, 7-Zip, PeaZip и многие другие. При необходимости ZIP-архив может быть объединён с модулем-распаковщиком в единый исполняемый файл (так называемый SFX-архив).

История

В начале 1980-х годов развивались BBS и FidoNet, и компания Software Enhancement Associates (SEA) придумала формат сжатия ARC, основанный на кодах Хаффмана. Программа распространялась по модели shareware, при этом зарегистрировавшемуся поставлялись исходные тексты.

Программист Фил Кац написал свои программы для работы с такими архивами — PKARC и PKXARC. Работали они вдесятеро быстрее ARC (движок был написан на ассемблере), стоили дешевле, последняя была распаковщиком и распространялась бесплатно. Программы получили такой успех, что Кац бросил работу и основал компанию PKWARE[4].

SEA засудили Каца за плагиат[5][6], при этом онлайн-общественность была против — казалось, что они задним числом делают формат ARC проприетарным и «Голиаф» судит «Давида» (на поверку обе компании состояли из нескольких человек). Оказалось, что в исходном тексте Каца были те же орфографические ошибки, что у SEA. В результате пришли к такому соглашению: Кац платит более 60 тыс. долларов, отчисляет процент от всех будущих продаж ПО для ARC, делает окончательную программу PKPAK и переходит на новый формат.

Так и появился формат ZIP. Название «zip» (со значением «быстро двигаться») было предложено другом Каца, Робертом Махони (Robert Mahoney). Таким названием они подразумевали, что их приложение быстрее ARC и других архиваторов того времени. Наиболее ранняя известная версия спецификации формата ZIP — .ZIP File Format Specification — была опубликована как часть поставки PKZIP 0.9 в файле APPNOTE.TXT в 1989 году. При этом Кац пообещал, что любой может свободно писать свои реализации[7][8][9][10][11].

Репутация Каца как «хорошего парня» быстро сделала ZIP основным форматом архивов на BBS. А SEA не оправилась от плохого пиара и была свёрнута в 1992 году.

История версий

У каждой спецификации формата ZIP есть свой собственный номер, который может не совпадать с номерами версий PKZIP (особенно это справедливо для PKZIP 6 и более новых версий). PKWARE постоянно добавляет возможности в свой формат, но новая версия формата становится доступной только при выходе следующего старшего выпуска программы PKZIP.

Версия спецификации Год Новые возможности
2.0 1993 Файлы могут сжиматься методом Deflate[1]
2.1 1996 Сжатие Deflate64
4.5 2001 Описан 64-битный формат ZIP[12]
4.6 2001 Сжатие bzip2 (опубликовано позднее с APPNOTE 5.2)
5.0 2002 Поддержка шифрования DES, 3DES, RC2, RC4 (опубликовано позднее с APPNOTE 5.2)
5.2 2003 Поддержка шифрования AES[13][14], исправление спецификации шифрования RC2-64
6.1 2004 Описано хранение сертификатов[15]
6.2.0 2004 Описано шифрование центрального каталога[16]
6.3.0 2006 Описано хранение имен файлов в формате Юникод (UTF-8)[17]; расширен список поддерживаемых алгоритмов шифрования, сжатия (добавлены такие современные методы, как LZMA и PPMd+) и хеширования
6.3.1 2007 Исправлены стандартные значения хеш-функций SHA-256/384/512[18]
6.3.2 2007 Описан метод сжатия 97 (WavPack)[19]
6.3.3[20] 2012 Изменения форматирования документов для облегчения ссылки на PKWARE Application Note от других стандартов, используя такие методы, как JTC 1 REFERENCING пояснительный доклад (RER) в соответствии с указаниями JTC 1 / SC 34 N 1621.
6.3.4[21] 2014 Обновление адреса офиса PKWARE, Inc.
6.3.5 2018 Документированны методы сжатия 16, 96 и 99. DOS метки времени/эпохи и точности. Добавлены дополнительные поля для ключей и расшифровки, а также опечатки и пояснения.


Утилита WinZip (начиная с версии 12.1) использует файловое расширение .zipx для ZIP-архивов с современными методами сжатия. В ZIPX в дополнение к классическому Deflate могут применяться методы BZip, LZMA, PPMd, JPEG и WavPack.[22][23] По этой причине файлы ZIPX могут не распознаваться классическими утилитами распаковки ZIP, в которых реализован лишь метод Deflate.

Структура

ZIP-файлы представляют собой архивы, хранящие несколько файлов. Составляющие архив файлы могут быть сжаты различными способами, в том числе, сохранены без сжатия. Сжатие файлов внутри архива независимо, что позволяет легко извлекать их или добавить новые, без необходимости распаковки или перепаковки всего архива. Такая возможность является явным преимуществом по сравнению с форматом сжатых tar-файлов, которые не допускают простой обработки содержимого с произвольным доступом.

В конце ZIP-файла располагается специальная секция, называемая каталогом. В нем хранится список файлов, находящихся в ZIP архиве, и данные о местонахождении каждого сжатого файла внутри архива. С использованием данных каталога приложения могут быстро получить полный список файлов из архива, не читая весь ZIP-архив. Файл ZIP-архива также может включать дополнительные данные, не связанные с хранением сжатых данных. В частности, эта возможность позволяет создавать самораспаковывающиеся архивы (SFX), состоящие из приложения-распаковщика и сжатых данных. Такие архивы начинаются с программного кода и распознаются операционной системой в качестве исполняемого файла. При запуске приложение находит ZIP-архив и его каталог и распаковывает файлы, что может быть удобным для передачи архивов пользователям, не имеющим установленных приложений для работы с форматом ZIP. Так как многие приложения распознают формат ZIP по наличию каталога в конце файла, становится также возможным применить простейший стеганографический прием для скрытия архива, добавив архив вслед за каким-либо безобидным файлом, например изображением формата GIF и поменяв расширение файла (по аналогии с так называемым методом «RARJPG»). Большинство приложений отобразит изображение, проигнорировав архив как незначимые мусорные данные, тогда как получатель файла сможет открыть архив после восстановления расширения «.ZIP».

Формат .ZIP использует 32-битный алгоритм CRC для контроля целостности. Также файлы архивов включают в себя две копии каталога архива в целях повышения защиты файлов от порчи данных в процессе передачи или хранения.

ZIP сегодня

В настоящее время формат ZIP считается общепризнанным форматом для многих приложений[5], включающих функции сжатия, резервного копирования и обмена данными. Наряду с большим количеством утилит, работающих с ZIP-файлами из командной строки, в середине 1990-х годов появились и графические программы для работы с ними. Поддержка формата ZIP включена во множество современных операционных систем.

На текущий момент существует ряд алгоритмов сжатия данных, выигрывающих у ZIP и в скорости, и в степени упаковки, и в дополнительных возможностях. Тем не менее, ZIP по-прежнему остаётся популярным методом сжатия данных[источник не указан 3178 дней].

Множество конкурирующих архиваторов, помимо своего собственного формата, также поддерживает формат ZIP.

Этот способ сжатия также широко используется в других программах и даже в некоторых форматах файлов. Например, файлы *.odt и *.docx — это в действительности ZIP-архивы, содержащие в себе XML-файлы разметки страницы и дополнительные ресурсы (например, изображения). Также ZIP-алгоритм может использоваться в распространённом файловом формате изображений − TIFF.

Существуют сторонние архиваторы, создающие ZIP-архивы с методом сжатия Deflate, но с большей степенью сжатия, чем у оригинальных утилит. Среди них — 7-Zip и модифицированный Кеном Сильверманом архиватор kzip.

Восстановление ZIP-архивов

Поскольку формат ZIP не поддерживает специальных данных для восстановления (в отличие от, например, RAR), следует помнить, что при повреждении ZIP-архива можно восстановить только его структуру (то есть сделать вновь доступным оглавление архива), но восстановить данные, пострадавшие из-за повреждения, не удастся. Для восстановления повреждённых ZIP-архивов существуют специализированные утилиты, например, бесплатные:

  • Object Fix Zip[24]
  • DiskInternals ZIP Repair[25]

Примечания

  1. 1,0 1,1 1,2 Registration of a new MIME Content-Type/Subtype - application/zip, IANA, 1993-07-20, <http://www.iana.org/assignments/media-types/application/zip>. Проверено 5 января 2012.  Архивная копия от 23 мая 2012 на Wayback Machine
  2. Phillip Katz, Computer Software Pioneer, 37, The New York Times (1 May 2000). Архивировано 30 июля 2017 года. Дата обращения 14 июня 2009.
  3. Microcomputer Applications for Public Administration (PADM 5530) Instructions on Using PKZIP and PKUNZIP (DOS). Дата обращения: 5 декабря 2016. Архивировано 16 июня 2016 года.
  4. The Rise and Fall of a Software Star; Phil Katz Loved Code - and Liquor (англ.), wsj (15 August 1997). Архивировано 6 января 2018 года. Дата обращения 7 января 2018.
  5. 5,0 5,1 Mark Stamp, Richard M. Low. 3.5 PKZIP // Applied Cryptanalysis: Breaking Ciphers in the Real World. — John Wiley & Sons, 2007. — С. 110—111. — 424 с. — ISBN 9780470148761.
  6. Phil Katz (PKARC author) sued by SEA (ARC author) Архивная копия от 24 августа 2019 на Wayback Machine, 14 Jun 1988, comp.sys.ibm.pc; «Shareware Developers Fight Court Battle Over Copyright Infringement», Daniel J. Lyons, PCWEEK (May 31, 1988) (англ.)
  7. Brian Livingston (8 September 2003), PKZip Must Open Up, <http://brianlivingston.com/eweek/article2/0,4149,1257562,00.html>. Проверено 5 января 2012.  Архивная копия от 11 ноября 2018 на Wayback Machine
  8. Where Did Zip Files Come From Anyway?, Infinity Design Concepts, Inc., <http://www.idcnet.us/ziphistory.html>. Проверено 5 января 2012.  Архивная копия от 20 ноября 2012 на Wayback Machine
  9. Press Release, 1989, <http://cd.textfiles.com/pcmedic9310/MAIN/MISC/COMPRESS/ZIP.PRS>. Проверено 5 января 2012.  Архивная копия от 27 мая 2012 на Wayback Machine
  10. Our Founder - Phil Katz, PKWARE, <http://www.pkware.com/about-us/phil-katz>. Проверено 5 января 2012.  Архивная копия от 14 января 2012 на Wayback Machine
  11. Gareth Horton; Rob Weir & Alex Brown (2 November 2010), sc34-wg1, <http://mailman.vse.cz/pipermail/sc34wg1study/2010-November/000082.html>. Проверено 5 января 2012.  Архивная копия от 3 марта 2016 на Wayback Machine
  12. File: APPNOTE.TXT - .ZIP File Format Specification Version: 4.5 Revised: 11/01/2001, 3 December 2001, <http://www.pkware.com/support/appnote.txt>. Проверено 21 апреля 2012.  Архивная копия от 3 декабря 2001 на Wayback Machine
  13. APPNOTE.TXT - .ZIP File Format Specification, Version: 5.2 - NOTIFICATION OF CHANGE, 16 July 2003, <http://www.pkware.com/documents/APPNOTE/APPNOTE-5.2.0.txt>. Проверено 5 января 2012.  Архивная копия от 28 февраля 2014 на Wayback Machine
  14. File: APPNOTE.TXT - .ZIP File Format Specification Version: 5.2 - NOTIFICATION OF CHANGE Revised: 06/02/2003, 2 July 2003, <http://pkware.com/products/enterprise/white_papers/appnote.html>. Проверено 21 апреля 2012.  Архивная копия от 2 июля 2003 на Wayback Machine
  15. File: APPNOTE - .ZIP File Format Specification Version: 6.1.0 - NOTIFICATION OF CHANGE Revised: 01/20/2004, 19 August 2004, <http://www.pkware.com/company/standards/appnote/>. Проверено 21 апреля 2012.  Архивная копия от 19 августа 2004 на Wayback Machine
  16. APPNOTE.TXT - .ZIP File Format Specification, Version: 6.2.0 - NOTIFICATION OF CHANGE, 26 April 2004, <http://www.pkware.com/documents/APPNOTE/APPNOTE-6.2.0.txt>. Проверено 5 января 2012.  Архивная копия от 13 февраля 2014 на Wayback Machine
  17. APPNOTE.TXT - .ZIP File Format Specification, Version: 6.3.0, 29 September 2006, <http://www.pkware.com/documents/APPNOTE/APPNOTE-6.3.0.TXT>. Проверено 5 января 2012.  Архивная копия от 3 февраля 2014 на Wayback Machine
  18. File: APPNOTE.TXT - .ZIP File Format Specification Version: 6.3.1 Revised: April 11, 2007, 14 May 2007, <http://www.pkware.com/documents/casestudies/APPNOTE.TXT>. Проверено 21 апреля 2012.  Архивная копия от 5 декабря 2014 на Wayback Machine
  19. File: APPNOTE.TXT - .ZIP File Format Specification Version: 6.3.2 Revised: September 28, 2007, 28 September 2007, <http://www.pkware.com/documents/casestudies/APPNOTE.TXT>. Проверено 21 апреля 2012.  Архивная копия от 5 декабря 2014 на Wayback Machine
  20. File: APPNOTE.TXT - .ZIP File Format Specification Version: 6.3.3 Revised: September 01, 2012, September 2012, <http://www.pkware.com/documents/casestudies/APPNOTE.TXT>  Архивная копия от 5 декабря 2014 на Wayback Machine
  21. File: APPNOTE.TXT - .ZIP File Format Specification Version: 6.3.4 Revised: October 1, 2014, 1 October 2014, <http://www.pkware.com/documents/casestudies/APPNOTE.TXT>  Архивная копия от 5 декабря 2014 на Wayback Machine
  22. Additional Compression Methods Specification. WinZip. Mansfield, CT: WinZip Computing, S.L (19 May 2009). Дата обращения: 24 мая 2009. Архивировано 14 апреля 2009 года.
  23. What is a Zipx File?. Winzip: Knowledgebase. Mansfield, CT: WinZip Computing, S.L (13 August 2010). Дата обращения: 17 августа 2010. Архивировано 16 июля 2015 года.
  24. Программа Object Fix Zip 1.7 // UPgrade : журнал. — 2010. — № 8 (460). — С. 32. — ISSN 1680-4694.
  25. Восстанавливаем любые данные // Chip : журнал. — 2011. — № 8 (149). — С. 125. — ISSN 1609-4212. Архивировано 23 сентября 2015 года.

Ссылки