原文链接

python多进程实现文件海量快速复制

直接上代码 ：

  1. # -*- coding:UTF-8 -*-
  2. import os
  3. import multiprocessing
  5. def copy_file(q,file_name,old_folder_name,new_folder_name):
  6.     '''完成文件的复制'''
  7.     # print('======>模拟copy文件：从%s--->%s  文件名是：%s' % (old_folder_name,new_folder_name,file_name))
  8.     old_f = open(old_folder_name+'/'+file_name,'rb')
  9.     content = old_f.read()
  10.     old_f.close()
  12.     new_f = open(new_folder_name+'/'+file_name,'wb')
  13.     new_f.write(content)
  14.     new_f.close()
  16.     #如果拷贝完文件，那么就向队列写提高消息，表示已经完成
  17.     q.put(file_name)
  19. def main():
  20.     #1.获取用户要copy的文件夹的名字
  21.     old_folder_name = input("请输入要copy的文件夹的地址(如：C:\\Users\\admin\\Desktop)：")
  23.     #2.创建一个新的文件夹
  24.     try:
  25.         new_folder_name = old_folder_name+'(复件)'
  26.         os.mkdir(new_folder_name)
  27.     except:
  28.         pass
  30.     #3获取文件夹的所有的待copy的文件名字 listdir()
  31.     file_names = os.listdir(old_folder_name)
  32.     #print(file_names)
  34.     #4.创建进程池
  35.     po = multiprocessing.Pool(5)
  37.     #5.创建一个队列
  38.     q = multiprocessing.Manager().Queue()
  40.     #6.向进程池中添加copy文件的任务
  41.     for file_name in file_names:
  42.         po.apply_async(copy_file,args=(q,file_name,old_folder_name,new_folder_name))
  44.     po.close()
  45.     #po.join()
  46.     all_file_num = len(file_names) #计算文件总数
  47.     copy_ok_num = 0
  48.     while True:
  49.         file_name = q.get()
  50.         #print('已经完成copy：%s' % file_name)
  51.         print('\r拷贝的进度：%.2f %%' % ((copy_ok_num+1)*100/all_file_num),end='')
  52.         copy_ok_num += 1
  53.         if copy_ok_num >= all_file_num:
  54.             break
  55. if __name__ == '__main__':
  56.     main()

如有疑问可移步：
多进程：https://blog.csdn.net/weixin_44840774/article/details/111399723
进程池：https://blog.csdn.net/weixin_44840774/article/details/111408921