pandas批量读取带有日期的文件夹简单操作
工作中碰到了这样一个数据处理的问题,想让你把某个文件夹下的子文件夹中的excel表级联成为1张表,用excel来做会很浪费时间并且很劳累,这时候我们就可以用pandas来加大工作效率,只需要半个小时就可以完成,并且修改一下就可复用,场景如下:


每个文件夹下都有若干个数据表
#因为是10到4月份所以第一个列表list1为天数
list1 = [31, 30, 31, 31, 28, 31, 8]
#因为为18年10月份到19年4月份的数据,第二个列表list2为年份
list2 = [8,8,8,9,9,9,9]
#第三个列表list3就是月份了
list3 = [10,11,12,'01','02','03','04']
df1_1 = DataFrame(data=None,columns=['断面类型','断面名称','最大潮流','出现时间','最小潮流','出现时间.1','稳定限额'])
for i in range(len(list1)):
      for j in range(list1[i]):
            if j<9:
      #此处pd.read_excel的参数header = 2的意思是从excel表第二行开始读取
                  df1 = pd.read_excel(r'D:/Personal/Desktop/宁夏电网日电能计划平衡表/201{}.{}/201{}.{}.0{}.xls'.format(str(list2[i]),str(list3[i]),str(list2[i]),str(list3[i]),str(j+1)),header=2)
            else:
                  df1 = pd.read_excel(r'D:/Personal/Desktop/宁夏电网日电能计划平衡表/201{}.{}/201{}.{}.{}.xls'.format(str(list2[i]),str(list3[i]),str(list2[i]),str(list3[i]),str(j+1)),header=2)
            df1_1 = pd.concat([df1,df1_1])
读取df1_1发现已经级联成功
pandas批量读取带有日期的文件夹简单操作的更多相关文章
- Linux下怎么创建和进入带有空格的文件夹
		
有时候需要创建带有空格的文件夹,虽然这不是一个好的习惯,但是偶尔会遇到.用的最多的是很多时候需要进入带有空格的文件夹,如"a b"是一个文件夹名. 创建:mkdir "a ...
 - Android读取asserts和raw文件夹下的文件
		
Android读取asserts和raw文件夹下的文件 经常需要用到读取“/res/raw”和"/asserts"文件夹下的文件,索性写成工具类方便以后使用. 一.raw文件夹下的 ...
 - JAVA文件操作类和文件夹的操作代码示例
		
JAVA文件操作类和文件夹的操作代码实例,包括读取文本文件内容, 新建目录,多级目录创建,新建文件,有编码方式的文件创建, 删除文件,删除文件夹,删除指定文件夹下所有文件, 复制单个文件,复制整个文件 ...
 - 如何在linux系统下对文件夹名有空格的文件夹进行操作
		
http://www.2cto.com/os/201409/335119.html 在Windows操作系统中可以轻易地创建\移动\删除文件夹名带有空格的文件夹, 而在linux则需要进行一些特殊的处 ...
 - python之文件的读写和文件目录以及文件夹的操作实现代码
		
这篇文章主要介绍了python之文件的读写和文件目录以及文件夹的操作实现代码,需要的朋友可以参考下 为了安全起见,最好还是给打开的文件对象指定一个名字,这样在完成操作之后可以迅速关闭文件,防止一些无用 ...
 - Java IO_001.File类--文件或文件夹相关操作
		
Java IO之File对象常用操作 File类:用于文件或文件夹或网址相关联的操作.可以关联或不关联文件(即关联不存在的文件).构造函数有: public File(String pathname) ...
 - java io流 对文件夹的操作
		
java io流 对文件夹的操作 检查文件夹是否存在 显示文件夹下面的文件 ....更多方法参考 http://www.cnblogs.com/phpyangbo/p/5965781.html ,与文 ...
 - Qt: 文件、文件夹的操作;
		
Qt没有提供单独的函数来对文件.文件夹进行操作, 但是提供了两个类: QFile, QDir; 1.文件操作 ) 文件是否存在: QFile file("D:/test.jpg") ...
 - python 关于文件夹的操作
		
在python中,文件夹的操作主要是利用os模块来实现的, 其中关于文件夹的方法为:os.lister() , os.path.join() , os.path.isdir() # path 表示文 ...
 
随机推荐
- J2EE 练习题 - JSON HTTP Service
			
J2EE 练习题 - JSON HTTP Service 1 要求 2 示例代码 2.1 Server 端 2.2 客户端 - Java 1 要求 在 Tomcat 上布署一个 HTTP Servic ...
 - poj 2102 A计划
			
可怜的公主在一次次被魔王掳走一次次被骑士们救回来之后,而今,不幸的她再一次面临生命的考验.魔王已经发出消息说将在T时刻吃掉公主,因为他听信谣言说吃公主的肉也能长生不老.年迈的国王正是心急如焚,告招天下 ...
 - 【转载】C#通过Copy方法快速复制DataTable对象
			
C#中的Datatable数据变量的操作过程中,可以通过DataTable的Copy方法快速复制当前的DataTable变量到新对象中,复制数据包含当前DataTable的结构信息如列名,同时也包含当 ...
 - echarts的最外层配置项
			
每次查echarts的官网上边的配置项不知道分别代表什么,必须点开才知道,所以在这做下Echarts配置项的简单记录 最外层的配置项: title:进行标题与副标题的显示隐藏,位置,字体颜色,字体大小 ...
 - 前端工程师拿到全新的 Mac 需要做哪些准备
			
最近苹果退出了新款 Mac,用了3年15款Pro之后,终于盼到18款的降价,于是含泪更新换代 但是每次换电脑,重装环境的好多东西记不清,于是记个笔记 一.终端 安装 zsh sh -c "$ ...
 - 面试题:什么叫B树
			
B是balanced的意思 是在二叉查找树 树的基础上增加了平衡的性质 导致它不是 二叉树了,变成了多叉树,但是叉几路又有了限制 否则怎么平衡呢 一棵m阶B树(balanced tree o ...
 - Git submodule 子模块的管理和使用
			
因为代码分了两个小组管理,一部分代码使用跨平台语言实现,一部分使用原生实现. 所以使用Git submodule 来进行管理. 1,查看/更新 子模块 $ git submodule add ssh: ...
 - redis-5.0.5安装(linux centos)
			
下载 cd /data wget http://download.redis.io/releases/redis-5.0.5.tar.gz 历史版本库地址 http://download.redis. ...
 - 一款APP的完整开发流程 (转载)
			
来源:https://www.sohu.com/a/239089829_100063940 近年来,在市场和政策的双轮驱动下,我国服务外包产业快速发展,服务智能化趋势显现.随着企业核心业务外包活动的日 ...
 - PHP的垃圾回收机制之引用计数
			
1,介绍 php的垃圾回收机制(GC)是在PHP5之后出现的,而在PHP5.3版本之前使用的都是“引用计数”的方式.实现引用计数的实质就是在每个内存对象中都有一个计数器,当内存对象被变量引用时,计数器 ...