文章目录
- 使用ZipFile类即可快速创建ZIP文件,支持文件和目录的递归压缩: import zipfile import os def create_zip(output_path, source_dir): with zipfile.ZipFile(output_path, ‘w’, zipfile.ZIP_DEFLATED) as zipf: for root, dirs, files in os.walk(source_dir): for file in files: file_path = os.path.join(root, file) arcname = os.path.relpath(file_path, source_dir) zipf.write(file_path, arcname) 关键参数说明: mode='w':写入模式('r'读/'a'追加) compression=ZIP_DEFLATED:启用DEFLATE压缩算法 arcname:控制文件在ZIP中的存储路径
- 解压操作同样简洁高效,支持完整解压和选择性解压: def extract_zip(zip_path, extract_dir): with zipfile.ZipFile(zip_path, ‘r’) as zipf: zipf.extractall(extract_dir) # 完整解压 # 示例:解压特定文件 # zipf.extract(‘docs/report.pdf’, extract_dir)
- 通过namelist()和infolist()方法可获取压缩包内容: def inspect_zip(zip_path): with zipfile.ZipFile(zip_path, ‘r’) as zipf: for info in zipf.infolist(): print(f”Name: {info.filename}”) print(f”Size: {info.file_size} bytes”) print(f”Compressed: {info.compress_size} bytes”) print(f”Modified: {info.date_time}”) print(“-” * 30)
- 实现密码保护需要结合setpassword方法(注意:ZIP加密强度有限,重要数据建议使用7z等格式): def create_encrypted_zip(output_path, source_dir, password): with zipfile.ZipFile(output_path, ‘w’, zipfile.ZIP_DEFLATED) as zipf: zipf.setpassword(password.encode(‘utf-8’)) # 添加文件… # 读取时需使用: # zipf.open(name, pwd=password.encode())
- 通过write方法的arcname参数实现增量更新: def update_zip(zip_path, new_file): with zipfile.ZipFile(zip_path, ‘a’) as zipf: zipf.write(new_file, arcname=os.path.basename(new_file))
- 大文件处理:使用ZIP_STORED存储模式避免内存溢出 多线程压缩:结合concurrent.futures实现并行处理 内存映射:使用BytesIO处理内存中的ZIP数据
- 虽然zipfile不直接支持分卷,但可通过拆分文件实现: def split_zip(source_path, output_prefix, chunk_size=100*1024*1024): # 创建主压缩包 main_zip = f”{output_prefix}.zip” with zipfile.ZipFile(main_zip, ‘w’) as zipf: zipf.write(source_path, arcname=os.path.basename(source_path)) # 拆分文件(伪代码,需实现实际拆分逻辑) # split_file(main_zip, chunk_size, output_prefix)
- 使用pathlib库处理路径差异: from pathlib import Path def normalize_path(path): return str(Path(path).resolve())
- try: with zipfile.ZipFile(‘data.zip’, ‘r’) as z: z.extractall(‘/protected/path’) except zipfile.BadZipFile: print(“错误:文件已损坏”) except RuntimeError as e: if “Password required” in str(e): print(“错误:需要密码”) except PermissionError: print(“错误:无写入权限”)
目录
- 一、ZIP文件操作基础三板斧
- 1.1 创建压缩包
- 1.2 解压操作
- 1.3 文件遍历与信息获取
- 二、进阶技巧:让压缩更智能
- 2.1 加密压缩实战
- 2.2 增量更新策略
- 2.3 性能优化技巧
- 三、高级场景解决方案
- 3.1 分卷压缩实现
- 3.2 跨平台路径处理
- 3.3 异常处理最佳实践
- 四、性能对比与选型建议
- 五、未来趋势与替代方案
使用ZipFile类即可快速创建ZIP文件,支持文件和目录的递归压缩:
import zipfile
import os
def create_zip(output_path, source_dir):
with zipfile.ZipFile(output_path, 'w', zipfile.ZIP_DEFLATED) as zipf:
for root, dirs, files in os.walk(source_dir):
for file in files:
file_path = os.path.join(root, file)
arcname = os.path.relpath(file_path, source_dir)
zipf.write(file_path, arcname)
关键参数说明:
- mode='w':写入模式('r'读/'a'追加)
- compression=ZIP_DEFLATED:启用DEFLATE压缩算法
- arcname:控制文件在ZIP中的存储路径
解压操作同样简洁高效,支持完整解压和选择性解压:
def extract_zip(zip_path, extract_dir):
with zipfile.ZipFile(zip_path, 'r') as zipf:
zipf.extractall(extract_dir) # 完整解压
# 示例:解压特定文件
# zipf.extract('docs/report.pdf', extract_dir)
通过namelist()和infolist()方法可获取压缩包内容:
def inspect_zip(zip_path):
with zipfile.ZipFile(zip_path, 'r') as zipf:
for info in zipf.infolist():
print(f"Name: {info.filename}")
print(f"Size: {info.file_size} bytes")
print(f"Compressed: {info.compress_size} bytes")
print(f"Modified: {info.date_time}")
print("-" * 30)
实现密码保护需要结合setpassword方法(注意:ZIP加密强度有限,重要数据建议使用7z等格式):
def create_encrypted_zip(output_path, source_dir, password):
with zipfile.ZipFile(output_path, 'w', zipfile.ZIP_DEFLATED) as zipf:
zipf.setpassword(password.encode('utf-8'))
# 添加文件...
# 读取时需使用:
# zipf.open(name, pwd=password.encode())
通过write方法的arcname参数实现增量更新:
def update_zip(zip_path, new_file):
with zipfile.ZipFile(zip_path, 'a') as zipf:
zipf.write(new_file, arcname=os.path.basename(new_file))
- 大文件处理:使用ZIP_STORED存储模式避免内存溢出
- 多线程压缩:结合concurrent.futures实现并行处理
- 内存映射:使用BytesIO处理内存中的ZIP数据
虽然zipfile不直接支持分卷,但可通过拆分文件实现:
def split_zip(source_path, output_prefix, chunk_size=100*1024*1024):
# 创建主压缩包
main_zip = f"{output_prefix}.zip"
with zipfile.ZipFile(main_zip, 'w') as zipf:
zipf.write(source_path, arcname=os.path.basename(source_path))
# 拆分文件(伪代码,需实现实际拆分逻辑)
# split_file(main_zip, chunk_size, output_prefix)
使用pathlib库处理路径差异:
from pathlib import Path
def normalize_path(path):
return str(Path(path).resolve())
try:
with zipfile.ZipFile('data.zip', 'r') as z:
z.extractall('/protected/path')
except zipfile.BadZipFile:
print("错误:文件已损坏")
except RuntimeError as e:
if "Password required" in str(e):
print("错误:需要密码")
except PermissionError:
print("错误:无写入权限")
不同压缩模式的性能对比(测试数据:100MB文本文件):
| 模式 | 压缩率 | 压缩时间 | 内存占用 |
|---|---|---|---|
| ZIP_STORED | 100% | 0.2s | 50MB |
| ZIP_DEFLATED | 35% | 2.1s | 150MB |
| ZIP_BZIP2 | 30% | 5.8s | 200MB |
| ZIP_LZMA | 28% | 12.3s | 300MB |
选型建议:
- 优先考虑ZIP_DEFLATED平衡性能与压缩率
- 超大文件建议使用ZIP_STORED避免内存溢出
- 需要更高压缩率时选择ZIP_BZIP2
虽然zipfile功能强大,但在以下场景建议使用其他方案:
- 超大数据集:考虑tarfile+gzip组合
- 企业级加密需求:使用py7zr处理7z格式
- 分布式压缩:结合dask进行并行处理
Python的ZIP处理能力通过zipfile模块得到了充分展现。从基础的文件打包到加密压缩,再到增量更新等高级功能,开发者可以用简洁的代码实现复杂的压缩需求。理解这些核心模式后,建议进一步探索pathlib的路径处理、shutil的归档操作等扩展功能,构建更健壮的文件处理系统。在云计算时代,掌握这些基础文件操作技能,将为处理海量数据奠定坚实的技术基础。
以上就是Python ZIP文件操作技巧详解的详细内容,更多关于Python ZIP文件操作的资料请关注风君子博客其它相关文章!
您可能感兴趣的文章:
- Python处理zip压缩文件的常见操作
- Python实现解压当天创建的ZIP文件到指定文件夹中
- Python Zipfile模块进行ZIP文件的创建解压信息获取和加密等操作
- Python实现批量压缩解压文件(zip、rar)
- Python中使用 zipfile创建文件压缩工具