1.如何进行开发？

2.版本1：程序大框架

 #1.创建一个文件夹

 #2.获取old文件夹中所有的文件名字

 #3.使用多进程的方式copy原文件夹中的所有文件到新文件夹中

3.版本2：创建一个文件夹

　　1）ipython3 获取小知识点

　　　　

　　2）写程序

　　　　　　

　　3)测试程序

　　　　

　　4）版本2：程序

import os

#1.创建一个文件夹

old_file_name = input("请输入你要copy的文件夹:")

new_file_name = old_file_name + "-附件"

#print(new_file_name)

os.mkdir(new_file_name)

#2.获取old文件夹中所有的文件名字

#3.使用多进程的方式copy原文件夹中的所有文件到新文件夹中

4.版本3：获取old文件夹中的所有文件

　　1）获取知识点

In [12]: import os

In [13]: os.li

os.linesep    os.link       os.listdir    os.listxattr  

In [13]: os.listdir("test")

Out[13]:

['17-进程池.py',

 '12-multiprocessing.py',

 '10-多个Fork.py',

 '04-吃包子.py',

 '01-多任务.py','08-全局变量.py',

 '11-fork多个.py',

 '14-join.py',

 '09-多个Fork.py',

 '02-fork.py']

　　2）写程序

　　　　　　

　　3）测试

　　　　

　　4）版本3：程序

 import os

 #0.获取要copy的文件夹的名字

 old_file_name = input("请输入你要copy的文件夹:")

 #1.创建一个文件夹

 new_file_name = old_file_name + "-附件"

 #print(new_file_name)

 os.mkdir(new_file_name)

 #2.获取old文件夹中所有的文件名字

 file_names = os.listdir(old_file_name)

 # print(file_names)

 #3.使用多进程的方式copy原文件夹中的所有文件到新文件夹中

5.版本4：模块化

 from multiprocessing import Pool

 import os

 def copyFileTask():

     "完成copy一个文件的功能"

     pass

 def main():

     #0.获取要copy的文件夹的名字

     old_file_name = input("请输入你要copy的文件夹:")

     #1.创建一个文件夹

     new_file_name = old_file_name + "-附件"

     #print(new_file_name)

     os.mkdir(new_file_name)

     #2.获取old文件夹中所有的文件名字

     file_names = os.listdir(old_file_name)

     # print(file_names)

     #3.使用多进程的方式copy原文件夹中的所有文件到新文件夹中

     p = Pool(5)

     p.apply_async(xxx)

 if __name__ == "__main__":

     main()

6.版本5：多进程copy文件

　　1）初始化版

from multiprocessing import Pool

import os

def copyFileTask():

    "完成copy一个文件的功能"

    fr = open()

    fw = open()

    content = fr.read()

    fw.write(content)

    fw.close()

    fr.close()

def main():

    #0.获取要copy的文件夹的名字

    old_file_name = input("请输入你要copy的文件夹:")

    #1.创建一个文件夹

    new_file_name = old_file_name + "-附件"

    #print(new_file_name)

    os.mkdir(new_file_name)

    #2.获取old文件夹中所有的文件名字

    file_names = os.listdir(old_file_name)

    # print(file_names)

    #3.使用多进程的方式copy原文件夹中的所有文件到新文件夹中

    p = Pool(5)

    p.apply_async(copyFileTask)

if __name__ == "__main__":

    main()

　　2）查看知识点

In [14]: from multiprocessing import Pool

In [15]: p = Pool(5)

In [16]: p.a

p.apply        p.apply_async  

In [18]: help(p.apply_async)
Help on method apply_async in module multiprocessing.pool:

apply_async(func, args=(), kwds={}, callback=None, error_callback=None) method of multiprocessing.pool.Pool instance

    Asynchronous version of `apply()` method.

(END)

　　3）版本2：打开关闭对应的文件名

from multiprocessing import Pool

import os

def copyFileTask(name,old_file_name,new_file_name):

    "完成copy一个文件的功能"

    fr = open(old_file_name + "/" + name)

    fw = open(new_file_name + "/" + name)

    content = fr.read()

    fw.write(content)

    fw.close()

    fr.close()

def main():

    #0.获取要copy的文件夹的名字

    old_file_name = input("请输入你要copy的文件夹:")

    #1.创建一个文件夹

    new_file_name = old_file_name + "-附件"

    #print(new_file_name)

    os.mkdir(new_file_name)

    #2.获取old文件夹中所有的文件名字

    file_names = os.listdir(old_file_name)

    # print(file_names)

    #3.使用多进程的方式copy原文件夹中的所有文件到新文件夹中

    p = Pool(5)

    for name in file_names:

        p.apply_async(copyFileTask,args=(name,old_file_name,new_file_name))

if __name__ == "__main__":

    main()

　　4）2窗口测试

　　　　

　　5）调试程序，添加print

  4 def copyFileTask(name,old_file_name,new_file_name):

  5     "完成copy一个文件的功能"

  6     print(name)

  7     fr = open(old_file_name + "/" + name, "r")

  8     fw = open(new_file_name + "/" + name, "w")

  9

 10     content = fr.read()

 11     fw.write(content)

 12

 13     fw.close()

 14     fr.close()

 15     print("------")

 16 
python@ubuntu:~/python06/04-多进程copy文件$ python3 copyFile.py

请输入你要copy的文件夹:test

17-进程池.py

------

12-multiprocessing.py

10-多个Fork.py

------

04-吃包子.py

------

07-谁先退出.py

------

01-多任务.py

------

15-Process创建的子进程和父进程的关系.py

20-Queue.py

------

------

　　6）调试成功

from multiprocessing import Pool

import os

def copyFileTask(name,old_file_name,new_file_name):

    "完成copy一个文件的功能"

    print(name)

    fr = open(old_file_name + "/" + name, "r")

    fw = open(new_file_name + "/" + name, "w")

    content = fr.read()

    fw.write(content)

    fw.close()

    fr.close()

    print("------")

def main():

    #0.获取要copy的文件夹的名字

    old_file_name = input("请输入你要copy的文件夹:")

    #1.创建一个文件夹

    new_file_name = old_file_name + "-附件"

    #print(new_file_name)

    os.mkdir(new_file_name)

    #2.获取old文件夹中所有的文件名字

    file_names = os.listdir(old_file_name)

    # print(file_names)

    #3.使用多进程的方式copy原文件夹中的所有文件到新文件夹中

    p = Pool(5)

    for name in file_names:

        p.apply_async(copyFileTask,args=(name,old_file_name,new_file_name))

    p.close()

    p.join()   #主进程要等待子进程

if __name__ == "__main__":

    main()
├── copyFile.py

├── test

│   ├── 01-多任务.py

│   ├── 02-fork.py

│   ├── 03-fork2.py

│   ├── 04-吃包子.py

│   ├── 05-fork的返回值.py

│   ├── 06-getppid.py

│   ├── 07-谁先退出.py

│   ├── 08-全局变量.py

└── test-附件

    ├── 01-多任务.py

    ├── 02-fork.py

    ├── 03-fork2.py

    ├── 04-吃包子.py

    ├── 05-fork的返回值.py

    ├── 06-getppid.py

    ├── 07-谁先退出.py

    ├── 08-全局变量.py

　　

7.版本6：主进程：显示进度条 Queue

　　　　

python@ubuntu:~/python06/04-多进程copy文件$ python3 copyFile.py

请输入你要copy的文件夹:test

copy的进度是:100.00%

已完成copy...
from multiprocessing import Pool,Manager

import os

import time

def copyFileTask(name,old_file_name,new_file_name,queue):

    "完成copy一个文件的功能"

   # print(name)

    fr = open(old_file_name + "/" + name, "r")

    fw = open(new_file_name + "/" + name, "w")

    content = fr.read()

    fw.write(content)

    fw.close()

    fr.close()

   # time.sleep(1)   #让进度条显示更加明显

    queue.put(name)

    #print("------")

def main():

    #0.获取要copy的文件夹的名字

    old_file_name = input("请输入你要copy的文件夹:")

    #1.创建一个文件夹

    new_file_name = old_file_name + "-附件"

    #print(new_file_name)

    os.mkdir(new_file_name)

    #2.获取old文件夹中所有的文件名字

    file_names = os.listdir(old_file_name)

    # print(file_names)

    #3.使用多进程的方式copy原文件夹中的所有文件到新文件夹中

    p = Pool(5)

    queue = Manager().Queue()

    for name in file_names:

        p.apply_async(copyFileTask,args=(name,old_file_name,new_file_name,queue))

    num = 0

    allNum = len(file_names)

    while True:

        queue.get()

        num += 1

        copyRate = num/allNum

        print("\rcopy的进度是:%.2f%%"%(copyRate*100),end="")

        if num == allNum:

            break

    print("\n已完成copy...")

   # p.close()

  #  p.join()   #主进程要等待子进程

if __name__ == "__main__":

    main()

8.优化版：抛出异常

  • 每次都要删除已经创建的test-附件,对代码进行异常处理，即可
from multiprocessing import Pool,Manager

import os

import time

def copyFileTask(name,old_file_name,new_file_name,queue):

    "完成copy一个文件的功能"

   # print(name)

    fr = open(old_file_name + "/" + name, "r")

    fw = open(new_file_name + "/" + name, "w")

    content = fr.read()

    fw.write(content)

    fw.close()

    fr.close()

    #time.sleep(1)  #让进度条显示更加明显

    queue.put(name)

    #print("------")

def main():

    #0.获取要copy的文件夹的名字

    old_file_name = input("请输入你要copy的文件夹:")

    #1.创建一个文件夹

    new_file_name = old_file_name + "-附件"

    #print(new_file_name)

    try:

        os.mkdir(new_file_name)

    except Exception as e:

        print("该文件附件已经存在,即将覆盖")

    #2.获取old文件夹中所有的文件名字

    file_names = os.listdir(old_file_name)

    # print(file_names)

    #3.使用多进程的方式copy原文件夹中的所有文件到新文件夹中

    p = Pool(5)

    queue = Manager().Queue()

    for name in file_names:

        p.apply_async(copyFileTask,args=(name,old_file_name,new_file_name,queue))

    num = 0

    allNum = len(file_names)

    while True:

        queue.get()

        num += 1

        copyRate = num/allNum

        print("\rcopy的进度是:%.2f%%"%(copyRate*100),end="")

        if num == allNum:

            break

    print("\n已完成copy...")

   # p.close()

  #  p.join()   #主进程要等待子进程

if __name__ == "__main__":

    main()

　　　　

5 多进程copy文件的更多相关文章

  1. 多进程copy文件

    from multiprocessing import Pool,Manager import os,time def copyFileTask(fileName,oldFolderName,newF ...

  2. Cocos2d-x建工程时避免copy文件夹和库

    方法一:(官方做法) 打开F:\cocos2d-1.0.1-x-0.9.1目录下的cocos2d-win32.vc2010.sln文件,然后右键点击解决方案,选择"添加"—&quo ...

  3. Linux跨用户copy文件

    foo用户home目录下有一文件file.txt,要将其copy至bar用户的home目录.Linux对用户home目录有严格的权限限制,非owner用户或者同group用户无权限读写,除非是root ...

  4. Windows服务器Pyton辅助运维--01.自动Copy文件（文件夹）到远程服务器所在目录

    Windows服务器Pyton辅助运维 01．自动Copy文件(文件夹)到远程服务器所在目录 开发环境: u  Web服务器: Windows Server 2008 R2 SP1 IIS 7.5 u ...

  5. [转]Cocos2d-x建工程时避免copy文件夹和库

    原文链接:  http://www.cnblogs.com/andyque/archive/2011/09/27/2192920.html 在上一篇教程中,我们演示了如何使用VS2010来新建一个工程 ...

  6. 怎么从docker中copy文件到 本机

    怎么从docker中copy文件到 本机 docker cp <containerId>:/file/path/within/container /host/path/target

  7. php利用curl实现多进程下载文件类

    批量下载文件一般使用循环的方式,逐一执行下载.但在带宽与服务器性能允许的情况下,使用多进程进行下载可以大大提高下载的效率.本文介绍PHP利用curl的多进程请求方法,实现多进程同时下载文件. 原理: ...

  8. 从主机系统向虚拟机系统里面copy 文件

    从主机系统向虚拟机系统里面copy 文件: 一:请确保你的虚拟机里面安装了 VMTools 1:安装VMTools 2: 进入虚拟机系统里面,如果没有自动运行 VMtool安装程序,请打开我的电脑,手 ...

  9. Django多进程日志文件问题

    Django多进程日志文件问题 最近使用Django做一个项目.在部署的时候发现日志文件不能滚动(我使用的是RotatingFileHandler),只有一个日志文件. 查看Log发现一个错误消息:P ...

随机推荐

  1. C++、Java、Objective-C、Swift 二进制兼容测试

    鉴于目前动态库在iOS App中使用越来越广泛,二进制的兼容问题可能会成为一个令人头疼的问题.本文主要对比一下C++.Java.Objecive-C和Swift的二进制兼容问题. iOS端动态库使用情 ...

  2. hdu1113 Word Amalgamation（详解--map和string的运用）

    版权声明:本文为博主原创文章.未经博主同意不得转载. vasttian https://blog.csdn.net/u012860063/article/details/35338617 转载请注明出 ...

  3. Redis通过IO进行序列化+反序列化

    必须引用序列化Serializable接口 创建类:Role package com.wbg.springRedis.entity; import java.io.Serializable; publ ...

  4. [转]收集Oracle UNDO诊断信息脚本

    使用该脚本可收集与undo相关的信息,在undo表空间出问题时可使用该脚本来诊断. 使用方法: 1.将脚本拷贝到服务器,创建文件保存,文件名可随意取,例如:diag.out 2.以sys用户登录数据库 ...

  5. QLViewController在iOS7下的自定义

    原文来自:QLViewController在iOS7下的自定义 原先的项目使用了quicklook framework,用于在iPhone上浏览各类文件,除了txt文本会有乱码的问题,其他文件的显示都 ...

  6. c和c++单链表

    c++版 #include<iostream> #include<malloc.h> using namespace std; struct node{ int data; n ...

  7. [SHELL]软件管理

  8. jquery 插件学习

    练习jquery上的一个插件编写 1.标准的3个基本内容,根目录里面创建2个文件夹(存放css和js)和1个html页面文件: 2.测试的主html页面代码 <!DOCTYPE html> ...

  9. Jquery之倒计时计算

      setInterval(); function setDate(setTime){ var date = new Date();//获取系统当前时间 )+)+"-"+date. ...

  10. C#获取本地磁盘信息

    直接上干货简单易懂 //磁盘监控(远程/本地) //需要引用System.Management.dll public class RemoteMonitoring { private static s ...