别动我的奶酪:CSV文件数据丢零现象及对策
CSV文件在读入EXCEL时,对于前面有零的数据项,比如电话号码,会自作聪明地丢掉那个零。
比如,我有一个北京客户,其号码为01059178888,如果这是通过CSV文件来的数据,在EXCEL中打开时,就成了1059178888,甚至会成为1E+9。
当然,微软官方帮助文件说,你在打开此类文件时,手动指定列的类型就可以避免丢零。如果我有几个这样的列,倒还可以,如果有几十个这样的列呢?累死人啊。还有,有些用户就希望彻底自动化,对此,微软还真没有给出什么解决方案。全世界成千上万的用户在解决丢零问题上不知浪费了多少时间。
对微软来说,解决这个问题可以说是徒手之劳,比如,允许用户设置成,在读入CSV文件时,所有列都缺省为字符串,而不是让EXCEL自作聪明去解释数据。
请问,谁给了EXCEL改变我数据的权利?
当然,这种现象除了微软的傲慢外,CSV格式的先天不足是另外一个原因。CSV只包含数据,而对数据并无任何描述。这就使得微软对用户数据动手动脚提供了借口。
近年来,随着XML的进化与普及,随着微软软件的进一步公开化,这个问题的解决已显露端倪。
这里假设我要从数据库中读出一批数据,将其保存为文本文件,让用户在EXCEL上进一步处理。
我不希望丢零,又希望用户不费太多手脚。
(本文使用的验证环境为 EXCEL 2010)
数据样品如下:
ID | Name | Phone | Address |
0001 | 李开复 | 01059178888 | 北京市朝阳区望京街8号利星行广场微软大厦 12 层 |
0002 | 张复开 | 01059179999 | 北京市朝阳区望京街9号利星行广场巨硬大厦 21 层 |
1. 输出CSV格式,数据如下:
0001,李开复,01059178888,北京市朝阳区望京街8号利星行广场微软大厦 12 层
0002,张复开,01059179999,北京市朝阳区望京街9号利星行广场巨硬大厦 21 层
如果在EXCEL中打开以上CSV格式的文件,将会出现:
ID | Name | Phone | Address |
1 | 李开复 | 1E+9 | 北京市朝阳区望京街8号利星行广场微软大厦 12 层 |
2 | 张复开 | 1E+9 | 北京市朝阳区望京街9号利星行广场巨硬大厦 21 层 |
ID前的0丢掉了不说,电话号码变成了科学计数法的数字。
2. 输出简单XML格式
因为是简单的XML格式,并不牵扯定义DAD等文件,在程序上容易实现。
例如:
<?xml version='1.0'?>
<?xml-stylesheet type="text/xsl" href="simple.xsl" ?>
<customer>
<row>
<ID>0001</ID>
<Name>李开复</Name>
<Phone>01059178888</Phone>
<Address>北京市朝阳区望京街8号利星行广场微软大厦 12 层</Address>
</row>
<row>
<ID>0002</ID>
<Name>张复开</Name>
<Phone>01059179999</Phone>
<Address>北京市朝阳区望京街9号利星行广场巨硬大厦 21 层</Address>
</row>
</customer>
在EXCEL打开时,出现几个对话框,但只要按OK键,还是可以打开。但是,ID/Phone还是丢零。
ID | Name | Phone | Address |
1 |
李开复 | 1059178888 | 北京市朝阳区望京街8号利星行广场微软大厦 12 层 |
2 | 张复开 | 1059179999 | 北京市朝阳区望京街9号利星行广场巨硬大厦 21 层 |
别急,我们可以告诉EXCEL,这个ID列是文字。
下例中,通过给第一行数据置入文字串的做法,让EXCEL把所有的列都认作文字,而不是数字,从而避免丢零。
<?xml version='1.0'?>
<?xml-stylesheet type="text/xsl" href="simple.xsl" ?>
<DATA>
<row>
<A>ID</A>
<B>Name</B>
<C>Phone</C>
<D>Address</D>
</row>
<row>
<A>0001</A>
<B>李开复</B>
<C>01059178888</C>
<D>北京市朝阳区望京街8号利星行广场微软大厦 12 层</D>
</row>
<row>
<A>0002</A>
<B>张复开</B>
<C>01059179999</C>
<D>北京市朝阳区望京街9号利星行广场巨硬大厦 21 层</D>
</row>
</DATA>
在EXCLE打开时: (第一行的abcd是新加的项目名称,红色部分才是原来的名称。)
A | B | C | D |
ID | Name | Phone | Address |
0001 |
李开复 | 01059178888 | 北京市朝阳区望京街8号利星行广场微软大厦 12 层 |
0002 | 张复开 | 01059179999 | 北京市朝阳区望京街9号利星行广场巨硬大厦 21 层 |
这样的数据打开后,用户只要删除第一行也就可以了。
3. 输出XML Spreadsheet 2003(XMLSS)格式
XMLSS的格式就要复杂一些。但仍然是编程可以接受的范围。
但是,我们可以省略一些不必要的东西。下例就是一个不能再简化的XMLSS数据。
<?xml version="1.0"?>
<?mso-application progid="Excel.Sheet"?>
<Workbook xmlns="urn:schemas-microsoft-com:office:spreadsheet"
xmlns:o="urn:schemas-microsoft-com:office:office"
xmlns:x="urn:schemas-microsoft-com:office:excel"
xmlns:ss="urn:schemas-microsoft-com:office:spreadsheet"
xmlns:html="http://www.w3.org/TR/REC-html40"
xmlns:x2="http://schemas.microsoft.com/office/excel/2003/xml">
<Worksheet ss:Name="Sheet1">
<Table ss:ExpandedColumnCount="4" ss:ExpandedRowCount="3" x:FullColumns="1"
x:FullRows="1" ss:DefaultColumnWidth="54" ss:DefaultRowHeight="13.5">
<Column ss:Width="38.25"/>
<Column ss:Width="52.5"/>
<Column ss:Width="76.5"/>
<Column ss:Width="281.25"/>
<Row>
<Cell><Data ss:Type="String">ID</Data></Cell>
<Cell><Data ss:Type="String">Name</Data></Cell>
<Cell><Data ss:Type="String">Phone</Data></Cell>
<Cell><Data ss:Type="String">Address</Data></Cell>
</Row>
<Row>
<Cell><Data ss:Type="String">0001</Data></Cell>
<Cell><Data ss:Type="String">李开复</Data></Cell>
<Cell><Data ss:Type="String">01059178888</Data></Cell>
<Cell><Data ss:Type="String">北京市朝阳区望京街8号利星行广场微软大厦 12 层</Data></Cell>
</Row>
<Row>
<Cell><Data ss:Type="Number">0002</Data></Cell>
<Cell><Data ss:Type="String">张复开</Data></Cell>
<Cell><Data ss:Type="String">01059179999</Data></Cell>
<Cell><Data ss:Type="String">北京市朝阳区望京街9号利星行广场巨硬大厦 21 层</Data></Cell>
</Row>
</Table>
</Worksheet>
</Workbook>
因为可以具体指定每个Cell的数据类型(Number/String/Date),可以更精确地显示各个数据的格式。
上例中故意把【0002】这个数据指定为Number,在读入Excel之后,这项数据前面的零将被丢掉。
ID | Name | Phone | Address |
001 |
李开复 | 1059178888 | 北京市朝阳区望京街8号利星行广场微软大厦 12 层 |
张复开 | 1059179999 | 北京市朝阳区望京街9号利星行广场巨硬大厦 21 层 |
如何生成上述XMLSS格式的数据,这个太简单了,就不用我再说了吧。
4. 直接生成XLSX文件
从Office2007之后,Excel文件后缀变成4位,xlsx。xslx文件实际上是一个zip文件。如果你改变xlsx后缀为zip,你就可以打开它。
你会发现,这是一大堆xml文件和其他数据文件的组合。如果你下点功夫,你会弄懂它的结构。
最近发现一位大牛为APEX写的一个插件,从ORACLE中能直接输出xlsx文件。
http://www.apex-plugin.com/oracle-apex-plugins/process-type-plugin/ir-report-to-excel-xlsx_74.html
有兴趣的话可以看看。我试着用过,修改了对列数目的限制,还是不错的。当然,还有一些其他问题,以后做别论。
别动我的奶酪:CSV文件数据丢零现象及对策的更多相关文章
- java读取目录下所有csv文件数据,存入三维数组并返回
package dwzx.com.get; import java.io.BufferedReader; import java.io.File; import java.io.FileReader; ...
- jmeter参数化、添加变量、生成随机数和导入csv文件数据
Remarks:本次使用jmeter版本为4.0 以下数据都在必应中演示: 添加普通变量 1.添加 User Defined Variables(用户自定义变量) 2.设置变量 3.使用变量 4.查看 ...
- java 两个csv文件数据去重
1.pom.xml配置 <dependency> <groupId>commons-io</groupId> <artifactId>commons-i ...
- HttpRunner学习7--引用CSV文件数据
前言 在之前的文章中,我们已经学习了 parameters 参数化,是在测试脚本中直接指定参数列表.这种方法简单易用,但如果我们的参数列表数据比较多,这种方法可能就不太适合了. 当数据量比较大的时候, ...
- C#使用Linq to csv读取.csv文件数据
前言:今日遇到了一个需要读取CSV文件类型的EXCEL文档数据的问题,原本使用NPOI的解决方案直接读取文档数据,最后失败了,主要是文件的类型版本等信息不兼容导致.其他同事有使用linq to csv ...
- CSV文件数据如何读取、导入、导出到新的CSV文件中以及CSV文件的创建
CSV文件数据如何读取.导入.导出到新的CSV文件中以及CSV文件的创建 一.csv文件的创建 (1)新建一个文本文档: 打开新建文本文档,进行编辑. 注意:关键字与关键字之间用英文半角逗号隔开.第一 ...
- C语言进行csv文件数据的读取
C语言进行csv文件数据的读取: #include <stdio.h> #include <string.h> #include <malloc.h> #inclu ...
- java调用sqlldr导入csv文件数据到临时表
package cn.com.file;import java.io.BufferedReader;import java.io.BufferedWriter;import java.io.File; ...
- python读取两个csv文件数据,进行查找匹配出现次数
现有需求 表1 表2 需要拿表1中的编码去表2中的门票编码列匹配,统计出现的次数,由于表2编码列是区域间,而且列不是固定的,代码如下 #encoding:utf-8 ##导入两个CSV进行比对 imp ...
随机推荐
- 理解iOS 8中的Self Sizing Cells和Dynamic Type
http://www.cocoachina.com/ios/20140922/9717.html 在iOS 8中,苹果引入了UITableView的一项新功能--Self Sizing Cells,对 ...
- 转:Bootstrap研究 精巧的网格布局系统
本网格布局系统属于Scaffolding(框架,布局)部分.在Scaffolding里面有(固定)网格布局(Grid System)和流式网格布局(Fluid Grid System).本文讨论第一种 ...
- CMake初步(1)
转自:<你所不知的OSG>第一章:CMake初步(1)http://bbs.osgchina.org/forum.php?mod=viewthread&tid=1189&f ...
- Spark Core源代码分析: Spark任务模型
概述 一个Spark的Job分为多个stage,最后一个stage会包含一个或多个ResultTask,前面的stages会包含一个或多个ShuffleMapTasks. ResultTask运行并将 ...
- Linux命令之find(一)
find命令的使用格式为:find options path expressions find命令事实上有两种options,一种是"真正属于自己的",还有一种位于expressi ...
- Android性能检测--traceview工具各个参数的意思
Android性能检测 traceview的使用方法 1. 把android-sdk-windows\tools路径加到Path当中 2. 编写测试代码: package com.wwj.tracev ...
- 面向对象(类,实例变量,方法定义,方法重载,构造方法,this,string类)
面向对象 类是由属性和方法组成 类是所有创建对象的模板 实例变量有默认值 实例变量至少在本类范围中有效 实例变量与局部变量冲突时,局部变量优先 类中方法定义类似于函数定义 修饰符 返回值类型 方法名( ...
- three.js 源代码凝视(十)Math/Line3.js
商域无疆 (http://blog.csdn.net/omni360/) 本文遵循"署名-非商业用途-保持一致"创作公用协议 转载请保留此句:商域无疆 - 本博客专注于 敏捷开发 ...
- STL--G - For Fans of Statistics(两个推断条件-二分)
G - For Fans of Statistics Time Limit:1000MS Memory Limit:65536KB 64bit IO Format:%I64d & ...
- UpdatePanel和jQuery不兼容
在做项目中发现,在使用了UpdatePanel的地方,局部刷新后,jquery失效了. 后来网上一查,才发现,jquery中的ready事件会在DOM完全加载后运行一次,而当我们实用了UpdatePa ...