Python多线程实现多任务文件复制完整示例
本文提供Python多线程与多进程结合的文件复制完整实例。通过创建进程池并发处理文件读写,利用队列实时统计已完成文件数量并动态显示复制进度条。代码涵盖文件夹创建、文件遍历及异常处理,适用于需要高效批量处理文件复制任务的场景。
Python多线程文件复制实现原理
本文通过一个完整的Python实例,演示如何利用多线程与多进程技术实现多任务文件复制功能。该案例旨在为开发者提供清晰的代码参考,帮助理解并发编程在文件IO操作中的应用。
核心代码解析
import os
import multiprocessing
def copy_file(q,file_name, old_folder_name, new_folder_name):
"""完成文件的复制"""
old_f = open(old_folder_name+"/"+file_name, "rb")
content = old_f.read()
old_f.close()
new_f = open(new_folder_name+"/"+file_name, "wb")
new_f.write(content)
new_f.close()
# print("从%s--->到%s 复制文件%s成功!" % (old_folder_name, new_folder_name, file_name))
q.put(file_name)
def main():
# 1.获取用户要copy的文件夹名称
old_folder_name = input("请输入要copy的文件夹:")
# 2.创建一个新的文件夹
try:
new_folder_name = old_folder_name + "复件"
os.mkdir(new_folder_name)
except:
pass
# 3.获取所有待copy的文件名称 listdir()
file_names = os.listdir(old_folder_name)
print(file_names)
# 4.创建进程池
po = multiprocessing.Pool(2)
# 5.创建一个队列
q = multiprocessing.Manager().Queue()
# 6.向进程池中添加copy文件的任务
for file_name in file_names:
po.apply_async(copy_file, args=(q,file_name, old_folder_name, new_folder_name))
po.close()
# po.join()
all_file_num = len(file_names) # 统计所有的文件个数
copy_ok_num = 0
while True:
file_name = q.get()
# print("已经完成copy :%s" % file_name)
copy_ok_num += 1
print("\r复制的进度为:%.2f %%" % (copy_ok_num*100/all_file_num),end='')
if copy_ok_num >= all_file_num:
break
if __name__ == '__main__':
main()


如需进一步了解Python并发编程及相关技术,建议参考本站其他专题文章,包括《Python进程与线程操作技巧总结》、《Python数据结构与算法教程》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》、《Python入门与进阶经典教程》、《Python+MySQL数据库程序设计入门教程》以及《Python常见数据库操作技巧汇总》。
希望上述代码示例及解析能对您的Python程序设计工作提供实际帮助。
本站声明
本文内容仅供参考,不代表本站观点。转载或引用请注明出处。如发现内容问题,请通过联系我们页面反馈。













