Python压缩/解压gzip大文件

简介:

Code tells all:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
#encoding=utf-8
#author: walker
#date: 2015-10-26
#summary: 测试gzip压缩/解压文件
 
import  gzip
   
BufSize  =  1024 * 8  
     
def  gZipFile(src, dst):
     fin  =  open (src,  'rb' )
     fout  =  gzip. open (dst,  'wb' )
     
     in2out(fin, fout)
     
def  gunZipFile(gzFile, dst):
     fin  =  gzip. open (gzFile,  'rb' )
     fout  =  open (dst,  'wb' )
     
     in2out(fin, fout)
     
def  in2out(fin, fout):
     while  True :
         buf  =  fin.read(BufSize)
         if  len (buf) <  1 :
             break
         fout.write(buf)
         
     fin.close()
     fout.close()
 
if  __name__  = =  '__main__' :
     src  =  r 'D:\tmp\src.txt'
     dst  =  r 'D:\tmp\src.txt.gz'
     ori  =  r 'D:\tmp\ori.txt'
     
     gZipFile(src, dst)
     print ( 'gZipFile over!' )
     gunZipFile(dst, ori)
     print ( 'gunZipFile over!' )

也可以简单地封装成一个类:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
class  GZipTool:
     def  __init__( self , bufSize):
         self .bufSize  =  bufSize
         self .fin  =  None
         self .fout  =  None
 
     def  compress( self , src, dst):
         self .fin  =  open (src,  'rb' )
         self .fout  =  gzip. open (dst,  'wb' )
         
         self .__in2out()
         
     def  decompress( self , gzFile, dst):
         self .fin  =  gzip. open (gzFile,  'rb' )
         self .fout  =  open (dst,  'wb' )
         
         self .__in2out()
         
     def  __in2out( self ,):
         while  True :
             buf  =  self .fin.read( self .bufSize)
             if  len (buf) <  1 :
                 break
             self .fout.write(buf)
             
         self .fin.close()
         self .fout.close()


相关阅读:

1、Python打包文件夹(zip/tar/tar.gz)

2、官方示例


*** walker ***

本文转自walker snapshot博客51CTO博客,原文链接http://blog.51cto.com/walkerqt/1706430如需转载请自行联系原作者


RQSLT

相关文章
|
1月前
|
自然语言处理 数据处理 Python
python操作和解析ppt文件 | python小知识
本文将带你从零开始,了解PPT解析的工具、工作原理以及常用的基本操作,并提供具体的代码示例和必要的说明【10月更文挑战第4天】
343 60
|
1月前
|
安全 Linux 数据安全/隐私保护
python知识点100篇系列(15)-加密python源代码为pyd文件
【10月更文挑战第5天】为了保护Python源码不被查看,可将其编译成二进制文件(Windows下为.pyd,Linux下为.so)。以Python3.8为例,通过Cython工具,先写好Python代码并加入`# cython: language_level=3`指令,安装easycython库后,使用`easycython *.py`命令编译源文件,最终生成.pyd文件供直接导入使用。
python知识点100篇系列(15)-加密python源代码为pyd文件
|
19天前
|
开发者 Python
Python中__init__.py文件的作用
`__init__.py`文件在Python包管理中扮演着重要角色,通过标识目录为包、初始化包、控制导入行为、支持递归包结构以及定义包的命名空间,`__init__.py`文件为组织和管理Python代码提供了强大支持。理解并正确使用 `__init__.py`文件,可以帮助开发者更好地组织代码,提高代码的可维护性和可读性。
18 2
|
1月前
|
Linux 区块链 Python
Python实用记录(十三):python脚本打包exe文件并运行
这篇文章介绍了如何使用PyInstaller将Python脚本打包成可执行文件(exe),并提供了详细的步骤和注意事项。
59 1
Python实用记录(十三):python脚本打包exe文件并运行
|
1月前
|
Java Python
> python知识点100篇系列(19)-使用python下载文件的几种方式
【10月更文挑战第7天】本文介绍了使用Python下载文件的五种方法,包括使用requests、wget、线程池、urllib3和asyncio模块。每种方法适用于不同的场景,如单文件下载、多文件并发下载等,提供了丰富的选择。
|
1月前
|
数据安全/隐私保护 流计算 开发者
python知识点100篇系列(18)-解析m3u8文件的下载视频
【10月更文挑战第6天】m3u8是苹果公司推出的一种视频播放标准,采用UTF-8编码,主要用于记录视频的网络地址。HLS(Http Live Streaming)是苹果公司提出的一种基于HTTP的流媒体传输协议,通过m3u8索引文件按序访问ts文件,实现音视频播放。本文介绍了如何通过浏览器找到m3u8文件,解析m3u8文件获取ts文件地址,下载ts文件并解密(如有必要),最后使用ffmpeg合并ts文件为mp4文件。
|
1月前
|
JSON 数据格式 Python
Python实用记录(十四):python统计某个单词在TXT/JSON文件中出现的次数
这篇文章介绍了一个Python脚本,用于统计TXT或JSON文件中特定单词的出现次数。它包含两个函数,分别处理文本和JSON文件,并通过命令行参数接收文件路径、目标单词和文件格式。文章还提供了代码逻辑的解释和示例用法。
44 0
Python实用记录(十四):python统计某个单词在TXT/JSON文件中出现的次数
|
1月前
|
Python
Python对PDF文件页面的旋转和切割
Python对PDF文件页面的旋转和切割
|
1月前
|
计算机视觉 Python
Python操作PDF文件
Python操作PDF文件
|
1月前
|
Python
Python编程--解压缩文件
Python编程--解压缩文件
下一篇
无影云桌面