Как распаковать данные zlib в UNIX?

Я создал zlib-сжатые данные в Python, например:

(или однострочный в оболочке: echo -n ‘. ‘ | python2 -c ‘import sys,zlib; sys.stdout.write(zlib.compress(sys.stdin.read()))’ > /tmp/data )

Теперь я хочу распаковать данные в оболочке. Ни zcat , ни uncompress работают:

Кажется, что я создал gzip-подобный файл, но без заголовков. К сожалению, я не вижу возможности распаковывать такие необработанные данные на странице gzip man, а пакет zlib не содержит исполняемой программы.

Есть ли утилита для распаковки необработанных данных zlib?

10 ответов

Можно также распаковать его, используя стандартный shell-script + gzip , если вы этого не сделали или хотите использовать openssl или другие инструменты.
Трюк состоит в том, чтобы добавить магическое число gzip и сжать метод до фактических данных из zlib.compress :

Редактирование:
@ d0sboots прокомментировал: для данных RAW Deflate вам нужно добавить еще 2 пустых байта:
â † ‘ «\x1f\x8b\x08\x00\x00\x00\x00\x00\x00\x00»

Этот Q на SO дает больше информации об этом подходе. Ответ там предполагает, что есть также 8-байтовый нижний колонтитул.

Пользователи @ Vitali-Kushner и @ mark-bessey сообщили об успехе даже с усеченными файлами, поэтому нижний колонтитул gzip не кажется строго обязательным.

@ tobias-kienzler предложил эту функцию для bashrc :
zlipd() (printf «\x1f\x8b\x08\x00\x00\x00\x00\x00» |cat — [email protected] |gzip -dc)

Я нашел решение (одно из возможных), используя openssl :

* ПРИМЕЧАНИЕ. Функциональность zlib, по-видимому, доступна в последних версиях openssl> = 1.0.0 (OpenSSL должен быть сконфигурирован /построен с параметром zlib или zlib-dynamic, последний по умолчанию)

Пользователь @tino прокомментировал ниже ответ OpenSSL, но я думаю, что это должно быть отдельным:

Я попробовал это, и это сработало для меня.

zlib-flate можно найти в пакете qpdf (в Debian Squeeze и Fedora 23, согласно комментариям в других ответах)

Я рекомендую pigz от Марк Адлер , соавтор библиотеки сжатия zlib. Выполните pigz , чтобы увидеть доступные флаги.

-z —zlib Compress to zlib (.zz) instead of gzip format.

Вы можете распаковать, используя флаг -d :

-d —decompress —uncompress Decompress the compressed input.

Предполагая файл с именем ‘test’:

• pigz -z test — создает сжатый файл zlib с именем test.zz
• pigz -d -z test.zz — преобразует test.zz в распакованный тестовый файл

В OSX вы можете выполнить brew install pigz

zlib реализует сжатие, используемое gzip, но а не формат файла. Вместо этого вы должны использовать gzip модуль , который сам использует zlib .

Это может сделать это:

Затем запустите его следующим образом:

Пример программы zpipe.c найден здесь от Mark Сам Адлер (поставляется с исходным распределением библиотеки zlib) очень полезен для этих сценариев с необработанными данными zlib. Скомпилируйте с помощью cc -o zpipe zpipe.c -lz и выполните распаковку: zpipe -d decompressed . Он также может выполнять сжатие без флага -d .

Вы можете использовать это для сжатия с помощью zlib:

И это для дефляции:

В macOS, который является полностью совместимым с POSIX UNIX (официально сертифицированным!), OpenSSL не поддерживает zlib , нет zlib-flate

Вот решение на основе Perl, которое можно использовать в качестве однострочного интерфейса командной строки, получает его вход через STDIN-канал и работает из коробки со свеже установленным macOS:

Более чистый формат, сценарий Perl выглядит следующим образом:

ZLIB распаковка

Я закодировал небольшое приложение, которое должно распаковывать данные, закодированные в формате gzip/deflate.

Для того, чтобы достичь этого,я использую библиотеку ZLIB, используя функцию распаковки.

Проблема в том, что эта функция не работает! Другими словами, данные не являются несжатыми!

Я размещаю здесь код:

Указатель на функцию успешно получен GetProcAddress, проблема в том, что функция возвращает NULL(и даже не ошибки, перечисленные в документации zlib)

2 ответа

Я использую библиотеку zlib C для распаковки данных, полученных из сетевого потока, и у меня есть два потока, работающих в двух отдельных NSThreads. Согласно документации zlib, распаковка двух различных потоков zlib в двух потоках требует, чтобы zalloc и zfree были потокобезопасными. В настоящее.

Возможный Дубликат : распаковка файла tar.Z с помощью python? Я пытаюсь прочитать сжатый zlib, чтобы получить прямой доступ к данным в содержащемся файле HDF (используя pyhdf). Однако я всегда получаю сообщение об ошибке. Вот досье . import zlib file = open(‘3B42.20070101.00.7A.HDF.Z’,’rb’) data =.

Функция uncompress() не будет распаковывать данные gzip, и в зависимости от того, что вы подразумеваете под «deflate», она также может не распаковывать их.

Есть три возможных формата, на которые вы ссылаетесь, а именно фактические сжатые данные, возможно, с некоторыми короткими заголовками и trailers для идентификации потока и предоставления некоторых контрольных данных в конце. Есть необработанные данные дефляции, как описано RFC 1951 . Существует zlib-обернутые данные дефляции, определенные RFC 1950 . Существует gzip-обернутые данные дефляции, определенные RFC 1952 .

uncompress() будет только распаковывать данные дефляции, завернутые в zlib. Он не будет распаковывать данные в оболочке gzip или необработанные данные дефляции.

Вы не предоставили контекст для того, что вы пытаетесь сделать. Однако, когда вы говорите «gzip/deflate»,, я могу догадаться, что по этой комбинации вы имеете в виду имена параметров кодирования содержимого HTTP. В этом случае из-за неудачного выбора имени кодировка содержимого «deflate» относится к данным дефляции в оболочке zlib, а не к необработанным данным. uncompress() распакует правильно доставленные HTTP сдует содержимое закодированных данных.

Я говорю «Правильно поставленный», потому что это может быть не так. Опять же из-за неудачного выбора имени и неспособности программистов Microsoft фактически прочитать спецификацию HTTP, серверы IIS неправильно доставляли необработанные данные deflate вместо данных, завернутых в zlib, когда клиент принимал кодировку содержимого deflate. Это привело к тому, что клиенты должны либо попытаться декодировать кодировку deflate content обоими способами и посмотреть, работает ли один из них, либо лучший подход, который заключается в том, чтобы просто не принимать кодировку deflate в первую очередь. Если клиент принимает только кодировку содержимого gzip, то никаких проблем нет.

Вы можете использовать inflateInit2() , inflate() , inflateEnd() и функции сжатия zlib, чтобы декодировать любые форматы, т. е. gzip-завернутый, с zlib-завернут, и сырье. Пожалуйста, прочтите документацию в zlib.h , чтобы узнать, как это сделать.

Кстати, функция uncompress() возвращает целое число, а не указатель. Поэтому, когда вы говорите, что функция вернула NULL вместо того, что она должна была сделать, я могу только предположить, что интерфейс этой функции zlib не был правильно определен.

Почему в вашем GetProcAddress используйте ‘uncompress’, но попробуйте распаковать? Вы получаете адрес ‘uncompress’ рутины.

Похожие вопросы:

Я скачиваю из Google Docs zipped NSData. Первые байты — PK. Я читал, чтобы распаковать их, я мог бы использовать категорию GTMNSData+zlib. Компилируя свой проект, я получаю некоторые ошибки.

Я ищу простую оболочку C zlib, чтобы распаковать массив байтов. Кто-нибудь его знает ?

Мой веб-сайт размещен на Dreamhost, и там они устанавливают только zlib вместе с PHP. Я не мог понять, как распаковать файлы с помощью методов commom из этого расширения, как описано здесь.

Я использую библиотеку zlib C для распаковки данных, полученных из сетевого потока, и у меня есть два потока, работающих в двух отдельных NSThreads. Согласно документации zlib, распаковка двух.

Возможный Дубликат : распаковка файла tar.Z с помощью python? Я пытаюсь прочитать сжатый zlib, чтобы получить прямой доступ к данным в содержащемся файле HDF (используя pyhdf). Однако я всегда.

В Ruby у меня есть буфер, содержащий данные, сжатые с помощью метода zlib compress2() . Однако я не нашел способа распаковать эти данные с помощью функции Zlib в стандартной библиотеке Ruby, которая.

Я пытаюсь распаковать zlib ‘ Ed XML следующим образом: https:/ / drive.google.com / file/d/0B52P0MZLTdw8ZzQwQzVpZGZVZWc Загрузка в онлайн-сервисы распаковки работает, например.

Мое требование состоит в том, чтобы распаковать файл zip, который я получаю с сервера на платформе Linux. Теперь мой C/C++ code должен распаковать папку, чтобы получить файлы json . Я провел свое.

На iOS 13 и macOS 10.15 Apple поставляет несколько хороших функций для сжатия и распаковки в одной строке кода. Однако они поддерживают только DEFLATE (RFC 1951), а у меня есть данные, сжатые с ZLIB.

Исправляем ошибку файла zlib1.dll

Ряд приложений, например, эмуляторы старых игровых приставок, такие как Sony, Nintendo или Sega, используют в своей работе файл zlib1.dll. Эта динамически подключаемая библиотека была разработана компанией «Linux Format» для операционной системы Windows. Если эта библиотека на компьютере отсутствует, пользователь видит сообщение об ошибке:

Причинами возникновения этой неполадки может стать сбой питания при записи данного файла, блокировка его антивирусом (в таком случае его нужно восстановить из карантина и добавить в исключения) либо внесение изменений в файл. Разберемся, как устранить эту проблему.

Работаем с утилитой «DLL-Files.com Client»

1. Существует ряд приложений, позволяющих быстро избавиться от ошибок в библиотеках DLL. Одной из таких программ является «DLL-files.com Client». Скачать ее можно с официального сайта разработчика https://ru.dll-files.com/client/ . Чтобы загрузить бесплатную демо-версию, воспользуйтесь ссылкой «Попробовать бесплатно».

2. После загрузки инсталлятора устанавливаем программу и запускаем ее.

3. Вводим в строку поиска название искомой библиотеки: «zlib1.dll» и нажимаем кнопку «Выполните поиск DLL-файла».

4. Далее щелкаем на найденном файле.

5. В следующем окне будут предложены файлы для установки с указанием их версии и разрядности. Далее жмем на кнопку «Установить».

6. Программа установит найденные файлы в соответствующие папки, а также сама зарегистрирует их в системном реестре.

Устанавливаем файл «zlib1.dll» вручную

Если нет желания устанавливать на свой компьютер дополнительное ПО, вы можете найти его одном из специальных сайтов, к примеру, на «DLLTOP.ru». Таким способом можно загрузить отдельный файл библиотеки «zlib1.dll» и скопировать его в системную папку вручную.

1. В поле поиска сайта напечатаем название библиотеки — zlib1.dll, а затем выберем ее в результатах поиска.

2. Далее нажимаем кнопку «Скачать» на открывшейся странице с описанием файла.

3. На ваш компьютер будет загружен архив, который следует распаковать и поместить библиотеку «zlib1.dll» в одну из системных папок:

• C:\Windows\System32 для 32-разрядной версии Windows;
• C:\Windows\SysWOW64 для 64-разрядной версии Windows.

4. Чтобы узнать разрядность своей ОС, можно кликнуть на кнопку «Пуск» правой клавишей мыши и выбрать команду «Система».

5. В открывшемся окне «О системе» находим секцию «Характеристики устройства» и смотрим информацию в строке «Тип системы».

6. Если при помещении файла «zlib1.dll» по одному из указанных выше путей появится сообщение, что файл с таким именем в папке уже есть, подтвердите его замену. После чего проверьте, исчезла ли ошибка.

7. Если проблема осталась, потребуется зарегистрировать добавленный DLL-файл в системе через окно «Выполнить». Воспользуемся клавишами «Windows» + «R» и напечатаем в поле ввода следующую команду: regsvr32.exe путь_к_файлу_dll , где путь зависит от разрядности вашей ОС. После ввода нужной команды подтверждаем ее нажатием кнопки «ОК».

8. Появится сообщение об успешной регистрации библиотеки, после чего нужно перезагрузить компьютер.

Расширение файла ZLIB

Zlib Archive

Что такое файл ZLIB?

ZLIB суффикс имени файла в основном используется для Zlib Archive файлов. Спецификация Zlib Archive была создана Jean-loup Gailly and Mark Adler. ZLIB файлы поддерживаются программными приложениями, доступными для устройств под управлением Linux. ZLIB формат файла, наряду с #NUMEXTENSIONS # другими форматами файлов, относится к категории Archive Files. Zlib является наиболее используемой программой для работы с ZLIB файлами. На официальном сайте разработчика Jean-loup Gailly and Mark Adler вы найдете не только подробную информацию о программном обеспечении Zlib, но также о ZLIB и других поддерживаемых форматах файлов.

Программы, которые поддерживают ZLIB расширение файла

Программы, которые могут обрабатывать ZLIB файлы, следующие. Файлы с расширением ZLIB, как и любые другие форматы файлов, можно найти в любой операционной системе. Указанные файлы могут быть переданы на другие устройства, будь то мобильные или стационарные, но не все системы могут быть способны правильно обрабатывать такие файлы.

Программы, обслуживающие файл ZLIB

Как открыть файл ZLIB?

Отсутствие возможности открывать файлы с расширением ZLIB может иметь различное происхождение. Что важно, все распространенные проблемы, связанные с файлами с расширением ZLIB, могут решать сами пользователи. Процесс быстрый и не требует участия ИТ-специалиста. Приведенный ниже список проведет вас через процесс решения возникшей проблемы.

Шаг 1. Скачайте и установите Zlib

Основная и наиболее частая причина, препятствующая открытию пользователями файлов ZLIB, заключается в том, что в системе пользователя не установлена программа, которая может обрабатывать файлы ZLIB. Решение этой проблемы очень простое. Загрузите Zlib и установите его на свое устройство. В верхней части страницы находится список всех программ, сгруппированных по поддерживаемым операционным системам. Если вы хотите загрузить установщик Zlib наиболее безопасным способом, мы рекомендуем вам посетить сайт Jean-loup Gailly and Mark Adler и загрузить его из официальных репозиториев.

Шаг 2. Проверьте версию Zlib и обновите при необходимости

Вы по-прежнему не можете получить доступ к файлам ZLIB, хотя Zlib установлен в вашей системе? Убедитесь, что программное обеспечение обновлено. Иногда разработчики программного обеспечения вводят новые форматы вместо уже поддерживаемых вместе с новыми версиями своих приложений. Если у вас установлена более старая версия Zlib, она может не поддерживать формат ZLIB. Все форматы файлов, которые прекрасно обрабатывались предыдущими версиями данной программы, также должны быть открыты с помощью Zlib.

Шаг 3. Настройте приложение по умолчанию для открытия ZLIB файлов на Zlib

После установки Zlib (самой последней версии) убедитесь, что он установлен в качестве приложения по умолчанию для открытия ZLIB файлов. Метод довольно прост и мало меняется в разных операционных системах.

Изменить приложение по умолчанию в Windows

• Щелкните правой кнопкой мыши на файле ZLIB и выберите « Открыть с помощью опцией».
• Нажмите Выбрать другое приложение и затем выберите опцию Еще приложения
• Чтобы завершить процесс, выберите Найти другое приложение на этом. и с помощью проводника выберите папку Zlib. Подтвердите, Всегда использовать это приложение для открытия ZLIB файлы и нажав кнопку OK .

Изменить приложение по умолчанию в Mac OS

• Щелкните правой кнопкой мыши на файле ZLIB и выберите Информация.
• Откройте раздел Открыть с помощью, щелкнув его название
• Выберите подходящее программное обеспечение и сохраните настройки, нажав Изменить все
• Если вы выполнили предыдущие шаги, должно появиться сообщение: Это изменение будет применено ко всем файлам с расширением ZLIB. Затем нажмите кнопку Вперед» , чтобы завершить процесс.

Шаг 4. Убедитесь, что ZLIB не неисправен

Если проблема по-прежнему возникает после выполнения шагов 1-3, проверьте, является ли файл ZLIB действительным. Вероятно, файл поврежден и, следовательно, недоступен.

1. Убедитесь, что ZLIB не заражен компьютерным вирусом

Если ZLIB действительно заражен, возможно, вредоносное ПО блокирует его открытие. Сканируйте файл ZLIB и ваш компьютер на наличие вредоносных программ или вирусов. Если сканер обнаружил, что файл ZLIB небезопасен, действуйте в соответствии с инструкциями антивирусной программы для нейтрализации угрозы.

2. Убедитесь, что файл с расширением ZLIB завершен и не содержит ошибок

Если вы получили проблемный файл ZLIB от третьего лица, попросите его предоставить вам еще одну копию. Возможно, что файл не был должным образом скопирован в хранилище данных и является неполным и поэтому не может быть открыт. Это может произойти, если процесс загрузки файла с расширением ZLIB был прерван и данные файла повреждены. Загрузите файл снова из того же источника.

3. Проверьте, есть ли у пользователя, вошедшего в систему, права администратора.

Иногда для доступа к файлам пользователю необходимы права администратора. Переключитесь на учетную запись с необходимыми привилегиями и попробуйте снова открыть файл Zlib Archive.

4. Убедитесь, что в системе достаточно ресурсов для запуска Zlib

Операционные системы могут иметь достаточно свободных ресурсов для запуска приложения, поддерживающего файлы ZLIB. Закройте все работающие программы и попробуйте открыть файл ZLIB.

5. Проверьте, есть ли у вас последние обновления операционной системы и драйверов

Регулярно обновляемая система, драйверы и программы обеспечивают безопасность вашего компьютера. Это также может предотвратить проблемы с файлами Zlib Archive. Возможно, что одно из доступных обновлений системы или драйверов может решить проблемы с файлами ZLIB, влияющими на более старые версии данного программного обеспечения.

Вы хотите помочь?

Если у Вас есть дополнительная информация о расширение файла ZLIB мы будем признательны, если Вы поделитесь ею с пользователями нашего сайта. Воспользуйтесь формуляром, находящимся здесь и отправьте нам свою информацию о файле ZLIB.