Python压缩/解压gzip大文件

简介:

Code tells all:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
#encoding=utf-8
#author: walker
#date: 2015-10-26
#summary: 测试gzip压缩/解压文件
 
import  gzip
   
BufSize  =  1024 * 8  
     
def  gZipFile(src, dst):
     fin  =  open (src,  'rb' )
     fout  =  gzip. open (dst,  'wb' )
     
     in2out(fin, fout)
     
def  gunZipFile(gzFile, dst):
     fin  =  gzip. open (gzFile,  'rb' )
     fout  =  open (dst,  'wb' )
     
     in2out(fin, fout)
     
def  in2out(fin, fout):
     while  True :
         buf  =  fin.read(BufSize)
         if  len (buf) <  1 :
             break
         fout.write(buf)
         
     fin.close()
     fout.close()
 
if  __name__  = =  '__main__' :
     src  =  r 'D:\tmp\src.txt'
     dst  =  r 'D:\tmp\src.txt.gz'
     ori  =  r 'D:\tmp\ori.txt'
     
     gZipFile(src, dst)
     print ( 'gZipFile over!' )
     gunZipFile(dst, ori)
     print ( 'gunZipFile over!' )

也可以简单地封装成一个类:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
class  GZipTool:
     def  __init__( self , bufSize):
         self .bufSize  =  bufSize
         self .fin  =  None
         self .fout  =  None
 
     def  compress( self , src, dst):
         self .fin  =  open (src,  'rb' )
         self .fout  =  gzip. open (dst,  'wb' )
         
         self .__in2out()
         
     def  decompress( self , gzFile, dst):
         self .fin  =  gzip. open (gzFile,  'rb' )
         self .fout  =  open (dst,  'wb' )
         
         self .__in2out()
         
     def  __in2out( self ,):
         while  True :
             buf  =  self .fin.read( self .bufSize)
             if  len (buf) <  1 :
                 break
             self .fout.write(buf)
             
         self .fin.close()
         self .fout.close()


相关阅读:

1、Python打包文件夹(zip/tar/tar.gz)

2、官方示例


*** walker ***

本文转自walker snapshot博客51CTO博客,原文链接http://blog.51cto.com/walkerqt/1706430如需转载请自行联系原作者


RQSLT

相关文章
|
5天前
|
数据格式 Python
【Python】已解决:Excel无法打开文件test.xIsx“,因为文件格式或文件扩展名无效。请确定文件未损坏,并且文件扩展名与文件的格式匹配。
【Python】已解决:Excel无法打开文件test.xIsx“,因为文件格式或文件扩展名无效。请确定文件未损坏,并且文件扩展名与文件的格式匹配。
34 0
|
1天前
|
安全 网络安全 数据安全/隐私保护
`certifi`是一个Python包,它提供了一个包含Mozilla证书颁发机构(CA)Bundle的PEM文件。
`certifi`是一个Python包,它提供了一个包含Mozilla证书颁发机构(CA)Bundle的PEM文件。
19 7
|
1天前
|
存储 对象存储 Python
`openpyxl`是一个用于读写Excel 2010 xlsx/xlsm/xltx/xltm文件的Python库。它不需要Microsoft Excel,也不需要.NET或COM组件。
`openpyxl`是一个用于读写Excel 2010 xlsx/xlsm/xltx/xltm文件的Python库。它不需要Microsoft Excel,也不需要.NET或COM组件。
6 1
|
11天前
|
JSON 数据格式 Python
Flask实现内部接口----pycharm安装及新建,location代表着文件路径,下面是Python的环境,Flask是由Python开发的框架,Python文件接口ython通过GET发送
Flask实现内部接口----pycharm安装及新建,location代表着文件路径,下面是Python的环境,Flask是由Python开发的框架,Python文件接口ython通过GET发送
|
7天前
|
缓存 Shell 开发工具
[oeasy]python024_vim读取文件_从头复制到尾_撤销_重做_reg_寄存器
[oeasy]python024_vim读取文件_从头复制到尾_撤销_重做_reg_寄存器
16 5
|
5天前
|
Python
python存取yaml文件
python存取yaml文件
|
10天前
|
机器学习/深度学习 TensorFlow 算法框架/工具
使用Python实现深度学习模型:知识蒸馏与模型压缩
【7月更文挑战第4天】 使用Python实现深度学习模型:知识蒸馏与模型压缩
24 1
|
13天前
|
Linux iOS开发 MacOS
【超级简单】Python代码如何打包成exe文件
【超级简单】Python代码如何打包成exe文件
37 1
|
19天前
|
JSON 安全 数据格式
Python文件操作宝典:一步步教你玩转文件读写
Python文件操作宝典:一步步教你玩转文件读写
|
19天前
|
Python
python搭建文件服务
python搭建文件服务
15 1