巧用Excel分列功能处理数据

Technorati 标签: 数据处理

     今天，主要工作就是处理测试数据，统计汇总成图表来显示。先来说说要求，然后给出我在折腾这堆数据中遇到的问题以及解决方法。

  问题要求：

     

格式说明： A是代表时间，低位字节在前，高位字节在后，十六进制格式。B代表电压值，低位字节在前，高位字节在后，十六进制格式，A和B后面，带4个无效数据和6个字节的0xFF，这种格式的数据排列都在一行里，一行塞满后然后继续填充下一行，如此循环下去，一直填满到30K的文本文件。

要求： 顺序排列时间值和电压值，编排出随着时间变化的电压曲线。

 

解决思路：

    一开始接到这个问题，脑子里想着用shell 脚本来处理，这里面涉及到文本断行断句、进制和数据转换、画图等等操作。光用shell是不可能完成了，因此这样的文本文件有4个，都是这么大小的，肯定要部分程序来处理。下面介绍我是如何处理这个问题的。

     1. 由于每个单元数据的列数是固定的，6个字节有效数据加10个字节的无效数据，构成一个数据单元，这些单元顺序的排成一行，首先要做的是把他们分开，最好分成每一行只有一个数据单元，这样就好便于后续处理。我在这里使用的方法是：利用Editplus的自动换行功能来实现的，具体操作如下，首先选择Editplus的自动换行，结果如下：

这不是我想要的结果，默认的自动换行是以每行80个字符为标准，打开自动换行选项，有如下配置：

Editplus里面关于自动换行有两种选项，一种是根据显示窗口的大小来决定每行的字符数，另一种是固定每行字符数。我这边单元数据的列数是固定的，因此，选择每行固定字符数，设置后，结果如下：

第二种方法：利用Windows自带的记事本，开启自动换行功能，缩短文本框的宽度，就可以调整自动换行的列数。效果如下：

恩，这样看数据，觉的工整多了，但是随之的问题也来了，本来，做到这一步，选择Editplus的列模式（Alt+C激活），就可以直接划去前6个有效字节，然后整体选出拷贝到Excel中的，但是Editplus给出如下提示：

 

哎，这条路堵住了，然后仔细看看上面的行号，在列模式下，第一行中有4个单元数据，第二行有2条单元数据，第三行有6行单元数据。这下也不好做了，有难度，动动脑袋，又有了如下动作：

因为这里面的数据有一些无效数据，采用列模式，可以根据一些条件来事先过滤一些无效数据，然后把一些数据拷贝到Excel里面去，哎呀：

又出现这样的结果。没办法了，只能手动分行，在每行的结尾，按住Alt+Enter来手动划分行，按照上面的列结果，手动分行后如下：

每行单元格中，有多行数据，现在是要求把每行前6个字节单独提取出来？怎么提取？在这里卡了许久，想想列模式，恩，有了。

再将上面的数据，拷贝会Editplus，然后使用列模式，选择整体的前6个字节，结果如下：

 

将此字段拷贝到Excel中，结果如下：

 

恩，这下好了，每行只含有一行的单位数据，现在就好办了，利用Excel的数据分列功能：

将每行的数据单独划分为一列，结果如下：

然后利用Excel的16进制转10进制的函数，来计算时间值和电压值，结果以10进制表示。

这里，要注意一点，

我就是选了这个选项，然后Excel函数死死的算不出来。使用到公式为：=HEX2DEC(B3)*256+HEX2DEC(A3) 最后算的结果如下：

想直接用电压值和时间值这两列数据作为源数据来画图，结果如下：

出现这个原因是有一些混杂无效数据写进去了，不要在意这些细节，经过初步的整理，优化一下图表的纵坐标的初始值，

最后得到的结果如下：

 

 

总结一下：上述的操作中，除了在Excel中手动分行之外，用到了Editplus的列操作，Excel的分列、函数、画图等，效率比起收工筛选强多了。

-----------------------------------------------恩--------------------------------------------------------

打完收工！回家吃饭。。。