Python tarfile прогресс вывода? - PullRequest
Новая
       5

Python tarfile прогресс вывода?

14 голосов
/ 08 сентября 2010

Я использую следующий код для извлечения файла tar: 

import tarfile
tar = tarfile.open("sample.tar.gz")
tar.extractall()
tar.close()

Однако я бы хотел следить за ходом процесса, в котором файлы извлекаются в данный момент. Как я могу это сделать?

ДОПОЛНИТЕЛЬНЫЕ БОНУСНЫЕ ТОЧКИ: возможно ли также создать процент от процесса экстракции? Я хотел бы использовать это для tkinter, чтобы обновить индикатор выполнения. Спасибо!

Ответы [ 6 ]

10 голосов
/ 08 сентября 2010

И файл-прогресс, и глобальный прогресс: 

import io
import os
import tarfile

def get_file_progress_file_object_class(on_progress):
    class FileProgressFileObject(tarfile.ExFileObject):
        def read(self, size, *args):
            on_progress(self.name, self.position, self.size)
            return tarfile.ExFileObject.read(self, size, *args)
    return FileProgressFileObject

class TestFileProgressFileObject(tarfile.ExFileObject):
    def read(self, size, *args):
        on_progress(self.name, self.position, self.size)
        return tarfile.ExFileObject.read(self, size, *args)

class ProgressFileObject(io.FileIO):
    def __init__(self, path, *args, **kwargs):
        self._total_size = os.path.getsize(path)
        io.FileIO.__init__(self, path, *args, **kwargs)

    def read(self, size):
        print("Overall process: %d of %d" %(self.tell(), self._total_size))
        return io.FileIO.read(self, size)

def on_progress(filename, position, total_size):
    print("%s: %d of %s" %(filename, position, total_size))

tarfile.TarFile.fileobject = get_file_progress_file_object_class(on_progress)
tar = tarfile.open(fileobj=ProgressFileObject("a.tgz"))
tar.extractall()
tar.close()
4 голосов
/ 17 января 2014

Вы можете указать параметр members в extractall()

with tarfile.open(<path>, 'r') as tarball:
   tarball.extractall(path=<some path>, members = track_progress(tarball))

def track_progress(members):
   for member in members:
      # this will be the current file being extracted
      yield member

member, это TarInfo объекты, см. Все доступные функции и свойства здесь

3 голосов
/ 08 сентября 2010

Вы можете использовать extract вместо extractall - вы сможете печатать имена членов по мере их извлечения. Чтобы получить список участников, вы можете использовать getmembers .

Текстовую библиотеку прогрессбаров можно найти здесь:

Фрагмент Tkinter:

2 голосов
/ 21 ноября 2018

Вы можете просто использовать tqdm() и распечатать прогресс числа извлекаемых файлов: 

import tarfile
from tqdm import tqdm

# open your tar.gz file
with tarfile.open(name=path) as tar:

    # Go over each member
    for member in tqdm(iterable=tar.getmembers(), total=len(tar.getmembers())):

        # Extract member
        tar.extract(member=member)
2 голосов
/ 04 июня 2014

Здесь есть отличное решение, которое переопределяет модуль tarfile как замену и позволяет указать обратный вызов для обновления.

https://github.com/thomaspurchas/tarfile-Progress-Reporter/

обновлено на основе комментария

1 голос
/ 06 мая 2015

Чтобы увидеть, какой файл в настоящее время извлекается, у меня работает следующее: 

import tarfile

print "Extracting the contents of sample.tar.gz:"
tar = tarfile.open("sample.tar.gz")

for member_info in tar.getmembers():
    print "- extracting: " + member_info.name
    tar.extract(member_info)

tar.close()
...