专栏首页python3Python压缩/解压gzip大文件

Python压缩/解压gzip大文件

Code tells all:

#encoding=utf-8
#author: walker
#date: 2015-10-26
#summary: 测试gzip压缩/解压文件

import gzip
  
BufSize = 1024*8  
    
def gZipFile(src, dst):
    fin = open(src, 'rb')
    fout = gzip.open(dst, 'wb')
    
    in2out(fin, fout)
    
def gunZipFile(gzFile, dst):
    fin = gzip.open(gzFile, 'rb')
    fout = open(dst, 'wb')
    
    in2out(fin, fout)
    
def in2out(fin, fout):
    while True:
        buf = fin.read(BufSize)
        if len(buf) < 1:
            break
        fout.write(buf)
        
    fin.close()
    fout.close()

if __name__ == '__main__':
    src = r'D:\tmp\src.txt'
    dst = r'D:\tmp\src.txt.gz'
    ori = r'D:\tmp\ori.txt'
    
    gZipFile(src, dst)
    print('gZipFile over!')
    gunZipFile(dst, ori)
    print('gunZipFile over!')

也可以简单地封装成一个类:

class GZipTool:
    def __init__(self, bufSize):
        self.bufSize = bufSize
        self.fin = None
        self.fout = None

    def compress(self, src, dst):
        self.fin = open(src, 'rb')
        self.fout = gzip.open(dst, 'wb')
        
        self.__in2out()
        
    def decompress(self, gzFile, dst):
        self.fin = gzip.open(gzFile, 'rb')
        self.fout = open(dst, 'wb')
        
        self.__in2out()
        
    def __in2out(self,):
        while True:
            buf = self.fin.read(self.bufSize)
            if len(buf) < 1:
                break
            self.fout.write(buf)
            
        self.fin.close()
        self.fout.close()

相关阅读:

1、Python打包文件夹(zip/tar/tar.gz)

2、官方示例

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • Python - 利用python编写的

    memcached作为缓存文件服务,默认是操作系统里面是可以直接yum -y install memcached进行安装的。

    py3study
  • 面向对象以及三大特性

    py3study
  • day25-python之继承组合

    py3study
  • TinyBERT 搜索:比BERT快10倍,小20倍

    最近,谷歌推出了一种新的方法来进行搜索并决定你看到的结果。这种方法基于流行的开源 transformer BERT,使用语言理解来获取搜索背后的含义,而传统的关...

    AI研习社
  • 网站分析工具哪家强?

    目前市面上网站分析的工具有很多,有些产品也换了个定位,将自己成为增长工具,营销领域的新名词总是层出不穷,为了在这个行业里面分一杯羹,实质没有太大的变化,或是说规...

    GA小站
  • 使用 Google Publisher Toolbar 扩展管理站点 AdSense 广告

    今天给大家讲讲 Chrome 浏览器明月必装的扩展之一,Google Publisher Toolbar(Google 发布商工具栏)。对于投放了 AdSens...

    明月云服务
  • 使用 Google Publisher Toolbar 扩展管理站点 AdSense 广告

    今天给大家讲讲 Chrome 浏览器明月必装的扩展之一,Google Publisher Toolbar(Google 发布商工具栏)。对于投放了 AdSens...

    明月登楼
  • 利用自我注意卷积神经网络实现音乐中的语音和伴奏分离(CS SD)

    几十年来,音乐声源分离一直是信号处理领域的一个热门课题,不仅因为其技术难度大,而且由于其在许多商业应用中的重要性,如自动伴音和重混音等。本文提出了一种新颖的自注...

    用户6853689
  • 博客 | 一文看懂深度学习发展史和常见26个模型

    本文首先从4个方面(张量、生成模型、序列学习、深度强化学习)追踪深度学习几十年的发展史,然后再介绍主流的26个深度学习模型。

    AI研习社
  • 浅议内滚动布局

    所谓“内滚动布局”,顾名思义就是主滚动条在页面内部的布局,是相对于传统的<html>滚动而言的,例如,下图所示滚动条,是从头部下方开始:

    疯狂的技术宅

扫码关注云+社区

领取腾讯云代金券