Использование модуля GZIP с Python

Question

Я пытаюсь использовать модуль Python GZIP, чтобы просто распаковать несколько .gz-файлов в каталог. Обратите внимание, что я не хочу читать файлы, а только их распаковать. После поиска этого сайта на некоторое время, у меня есть этот сегмент кода, но он не работает:

import gzip 
import glob 
import os 
for file in glob.glob(PATH_TO_FILE + "/*.gz"): 
    #print file 
    if os.path.isdir(file) == False: 
     shutil.copy(file, FILE_DIR) 
     # uncompress the file 
     inF = gzip.open(file, 'rb') 
     s = inF.read() 
     inF.close() 

в .gz файлы находятся в правильном месте, и я могу напечатать полный путь + имя файла с помощью команды печати , но модуль GZIP не выполняется надлежащим образом. что мне не хватает?

Answer 1

Если у вас нет ошибки, то модуль gzip, вероятно, : выполняется правильно.

Я не хочу, чтобы читать файлы, только распаковывать их

Модуль gzip не работает как программа настольного архивирования, как 7-Zip - вы не можете «распаковывать» файл без «чтения». То, что вы, вероятно, подразумеваете под «uncompress», более точно описано - с точки зрения программирования - как «читать поток из сжатого файла и записывать его в новый файл».

inF = gzip.open(file, 'rb') 
s = inF.read() 
inF.close() 

Здесь вы просто читаете поток. Вам просто нужно записать его в новый файл:

inF = gzip.open(file, 'rb') 
outF = open(outfilename, 'wb') 
outF.write(inF.read()) 
inF.close() 
outF.close() 

Answer 2

Вы распаковку файла в s переменные, и ничего не делать с ним. Вам следует прекратить поиск stackoverflow и прочитать хотя бы учебник по python. Шутки в сторону.

Во всяком случае, есть несколько вещи неправильно с кодом:

1. вам нужно, чтобы хранить распакованные данные в s в какой-то файл.

2. Нет необходимости копировать фактические файлы *.gz. Потому что в вашем коде вы распаковываете исходный файл gzip, а не копию.

3. Вы используете file, что является зарезервированным словом, как переменной. Это не ошибка, это очень плохая практика.

Это, вероятно, следует делать то, что вы хотите:

import gzip 
import glob 
import os 
import os.path 

for gzip_path in glob.glob(PATH_TO_FILE + "/*.gz"): 
    if os.path.isdir(gzip_path) == False: 
     inF = gzip.open(gzip_path, 'rb') 
     # uncompress the gzip_path INTO THE 's' variable 
     s = inF.read() 
     inF.close() 

     # get gzip filename (without directories) 
     gzip_fname = os.path.basename(gzip_path) 
     # get original filename (remove 3 characters from the end: ".gz") 
     fname = gzip_fname[:-3] 
     uncompressed_path = os.path.join(FILE_DIR, fname) 

     # store uncompressed file data from 's' variable 
     open(uncompressed_path, 'w').write(s) 

Answer 3

Я был в состоянии решить эту проблему с помощью модуля подпроцесс:

for file in glob.glob(PATH_TO_FILE + "/*.gz"): 
    if os.path.isdir(file) == False: 
     shutil.copy(file, FILE_DIR) 
     # uncompress the file 
     subprocess.call(["gunzip", FILE_DIR + "/" + os.path.basename(file)]) 

Поскольку моя цель состояла в том, чтобы просто разархивировать архива, приведенный выше код выполняет это. Архивированные файлы расположены в центральном месте и скопированы в рабочую область, несжаты и используются в тестовом примере. модуль GZIP был слишком сложным для того, что я пытался выполнить.

Спасибо за помощь всем. Это очень ценится!

Answer 4

Чтобы открыть файлы, необходимо использовать with и, конечно же, сохранить результат чтения сжатого файла.См gzip documentation:

import gzip 
import glob 
import os 
import os.path 

for gzip_path in glob.glob("%s/*.gz" % PATH_TO_FILE): 
    if not os.path.isdir(gzip_path): 
     with gzip.open(gzip_path, 'rb') as in_file: 
      s = in_file.read() 

     # Now store the uncompressed data 
     path_to_store = gzip_fname[:-3] # remove the '.gz' from the filename 

     # store uncompressed file data from 's' variable 
     with open(path_to_store, 'w') as f: 
      f.write(s) 

В зависимости от того, что именно вы хотите сделать, вы можете захотеть взглянуть на tarfile и его 'r:gz' вариант для открытия файлов.

Answer 5

Я думаю, что есть гораздо более простое решение, чем остальные представили данные оп только хотел, чтобы извлечь все файлы в каталоге:

import glob 
from setuptools import archive_util 

for fn in glob.glob('*.gz'): 
    archive_util.unpack_archive(fn, '.')