Python实现常见压缩文件格式的读写与处理
本文详细介绍Python中处理常见压缩格式的方法,涵盖zip、tar.gz、rar及7z文件的创建与解压。通过zipfile、tarfile、rarfile和py7zr等核心模块,结合Windows与Linux环境下的具体配置步骤,提供完整的代码示例与安装指南,帮助开发者高效实现文件归档与解压功能。
在日常开发工作中,除了常规的文本文件处理,经常需要面对各类压缩文件的归档与解压需求。

常见的压缩文件格式主要包括以下几种:
- rar:在Windows系统中广泛使用,对应的知名图形界面工具为WinRAR。
- tar:Linux系统下的标准打包工具,仅进行文件打包而不进行压缩。
- gz:即gzip格式,通常仅支持单个文件的压缩。若需处理多个文件,需先使用tar进行打包,再结合gz进行压缩。
- tgz:等同于gz格式,指先使用tar打包,随后再用gz压缩得到的文件。
- zip:与gzip算法相似,但支持打包并压缩多个文件。需要注意的是,其压缩率通常低于tar格式。
- 7z:由7zip软件支持的格式,具有较高的压缩效率。
除Python编程处理外,用户也可选择使用专用的压缩解压缩软件或命令行工具手动完成操作。
zip文件处理
Python内置的zipfile模块专门用于处理zip格式的压缩与解压。该模块包含两个核心类:ZipFile用于创建和读取zip文件,而ZipInfo则用于存储zip文件中每个文件的元数据信息。
相关代码示例如下:
import os
import zipfile
# 压缩
def make_zip(source_dir, output_filename):
zipf = zipfile.ZipFile(output_filename, 'w')
pre_len = len(os.path.dirname(source_dir))
for parent, dirnames, filenames in os.walk(source_dir):
for filename in filenames:
print(filename)
pathfile = os.path.join(parent, filename)
arcname = pathfile[pre_len:].strip(os.path.sep) # 相对路径
zipf.write(pathfile, arcname)
print()
zipf.close()
# 解压缩
def un_zip(file_name):
"""unzip zip file"""
zip_file = zipfile.ZipFile(file_name)
if os.path.isdir(file_name + "_files"):
pass
else:
os.mkdir(file_name + "_files")
for names in zip_file.namelist():
zip_file.extract(names, file_name + "_files/")
zip_file.close()
if __name__ == '__main__':
make_zip(r"E:python_samplelibstest_tar_fileslibs", "test.zip")
un_zip("test.zip")tar.gz文件处理
tarfile模块可用于读写tar归档文件,支持gzip、bz2和lzma等多种压缩方式。使用tarfile时,必须明确指定操作模式:
mode参数应为‘filemode[:compression]’格式的字符串,默认值为‘r’。以下是完整的模式组合列表:
| 模式 | 动作 |
|---|---|
| ‘r’ or ‘r:*’ | 打开和读取使用透明压缩(推荐)。 |
| ‘r:’ | 打开和读取不使用压缩。 |
| ‘r:gz’ | 打开和读取使用gzip 压缩。 |
| ‘r:bz2’ | 打开和读取使用bzip2 压缩。 |
| ‘r:xz’ | 打开和读取使用lzma 压缩。 |
| ‘x’ 或 ‘x:’ | 创建tarfile不进行压缩。如果文件已经存在,则抛出 FileExistsError 异常。 |
| ‘x:gz’ | 使用gzip压缩创建tarfile。如果文件已经存在,则抛出 FileExistsError 异常。 |
| ‘x:bz2’ | 使用bzip2 压缩创建tarfile。如果文件已经存在,则抛出 FileExistsError 异常。 |
| ‘x:xz’ | 使用lzma 压缩创建tarfile。如果文件已经存在,则抛出 FileExistsError 异常。 |
| ‘a’ or ‘a:’ | 打开以便在没有压缩的情况下追加。如果文件不存在,则创建该文件。 |
| ‘w’ or ‘w:’ | 打开用于未压缩的写入。 |
| ‘w:gz’ | 打开用于 gzip 压缩的写入。 |
| ‘w:bz2’ | 打开用于 bzip2 压缩的写入。 |
| ‘w:xz’ | 打开用于 lzma 压缩的写入。 |
此外,还存在第二种mode格式:‘filemode|[compression]’。调用tarfile.open()将返回一个TarFile对象,该对象将数据视为数据块流进行处理:
| 模式 | 动作 |
|---|---|
| ‘r|*’ | 打开 tar 块的 流 以进行透明压缩读取。 |
| ‘r|’ | 打开一个未压缩的 tar 块的 stream 用于读取。 |
| ‘r|gz’ | 打开一个 gzip 压缩的 stream 用于读取。 |
| ‘r|bz2’ | 打开一个 bzip2 压缩的 stream 用于读取。 |
| ‘r|xz’ | 打开一个 lzma 压缩 stream 用于读取。 |
| ‘w|’ | 打开一个未压缩的 stream 用于写入。 |
| ‘w|gz’ | 打开一个 gzip 压缩的 stream 用于写入。 |
| ‘w|bz2’ | 打开一个 bzip2 压缩的 stream 用于写入。 |
| ‘w|xz’ | 打开一个 lzma 压缩的 stream 用于写入。 |
具体代码示例如下:
import os
import tarfile
import gzip
# 一次性打包整个根目录。空子目录会被打包。
# 如果只打包不压缩,将"w:gz"参数改为"w:"或"w"即可。
def make_targz(output_filename, source_dir):
with tarfile.open(output_filename, "w:gz") as tar:
tar.add(source_dir, arcname=os.path.basename(source_dir))
# 逐个添加文件打包,未打包空子目录。可过滤文件。
# 如果只打包不压缩,将"w:gz"参数改为"w:"或"w"即可。
def make_targz_one_by_one(output_filename, source_dir):
tar = tarfile.open(output_filename, "w:gz")
for root, dir, files in os.walk(source_dir):
for file in files:
pathfile = os.path.join(root, file)
tar.add(pathfile)
tar.close()
def un_gz(file_name):
"""ungz zip file"""
f_name = file_name.replace(".gz", "")
# 获取文件的名称,去掉
g_file = gzip.GzipFile(file_name)
# 创建gzip对象
open(f_name, "wb+").write(g_file.read())
# gzip对象用read()打开后,写入open()建立的文件里。
g_file.close() # 关闭gzip对象
def un_tar(file_name):
# untar zip file
tar = tarfile.open(file_name)
names = tar.getnames()
if os.path.isdir(file_name + "_files"):
pass
else:
os.mkdir(file_name + "_files")
# 由于解压后是许多文件,预先建立同名文件夹
for name in names:
tar.extract(name, file_name + "_files/")
tar.close()
if __name__ == '__main__':
make_targz('test.tar.gz', "E:python_samplelibs")
make_targz_one_by_one('test01.tgz', "E:python_samplelibs")
un_gz("test.tar.gz")
un_tar("test.tar")rar文件处理
可以使用rarfile库解压.rar文件,但该库不支持使用rarfile直接压缩生成rar文件。若尝试通过pip install unrar安装相关组件,可能会遇到如下报错:
Couldn’t find path to unrar library…
出现此错误的原因是Python中的unrar组件依赖于RAR官方提供的动态链接库。
Windows系统下的安装配置
- 需前往RARLab官网下载库文件并完成安装。
- 建议安装时选择默认路径,通常位于C:Program Files (x86)UnrarDLL目录下。
- 需添加系统环境变量,在系统变量中新建变量名UNRAR_LIB_PATH。若为64位系统,值应设为C:Program Files (x86)UnrarDLLx64UnRAR64.dll;若为32位系统,值应设为C:Program Files (x86)UnrarDLLUnRAR.dll。
- 保存环境变量后,再次执行pip install unrar进行安装,此时代码运行即可正常执行。
Linux系统下的安装配置
- 首先下载rar源代码文件。
- 解压安装包,进入目录后执行编译安装命令,以生成.so动态库文件。
- 配置好环境变量后,再执行pip install unrar进行安装。
# cd /usr/local/src/
# wget https://www.rarlab.com/rar/unrarsrc-6.0.3.tar.gz
# tar zxvf unrarsrc-6.0.3.tar.gz
# cd unrar
# make lib
# make install-lib //生成libunrar.so 文件
# vim /etc/profile
export UNRAR_LIB_PATH=/usr/lib/libunrar.so
# source /etc/profile相关代码示例如下:
import rarfile
def unrar(rar_file, dir_name):
# rarfile需要unrar支持, linux下pip install unrar, windows下在winrar文件夹找到unrar,加到path里
rarobj = rarfile.RarFile(rar_file.decode('utf-8'))
rarobj.extractall(dir_name.decode('utf-8'))7z文件处理
处理.7z文件的压缩与解压需依赖py7zr组件。具体代码示例如下:
import py7zr
# 压缩
with py7zr.SevenZipFile("Archive.7z", 'r') as archive:
archive.extractall(path="/tmp")
# 解压缩
with py7zr.SevenZipFile("Archive.7z", 'w') as archive:
archive.writeall("target/")以上即为基于Python实现各类文件压缩与解压缩的详细内容,更多关于Python文件压缩的资料请关注本站其它相关文章!
本站声明
本文内容仅供参考,不代表本站观点。转载或引用请注明出处。如发现内容问题,请通过联系我们页面反馈。













