开源 - Ideal库 - Excel帮助类,TableHelper实现(三)
书接上回,我们今天继续讲解实现对象集合与DataTable的相互转换。

01、把表格转换为对象集合
该方法是将表格的列名称作为类的属性名,将表格的行数据转为类的对象。从而实现表格转换为对象集合。同时我们约定如果类的属性设置了DescriptionAttribute特性,则特性值和表格列名一一对应,如果没有设置特性则取属性名称和列名一一对应。
同时我们需要约束类只能为结构体或类,而不能是枚举、基础类型、以及集合类型、委托、接口等。
类的类型校验成功后,我们还需要校验表格是否能转换为对象,即判断表格列名和类的属性名称或者Description特性值是否存在一致,如果没有一个表格列名和类的属性能对应上,则报表格列名无法映射至对象属性,无法完成转换异常。
当这些校验成功后,开始循环处理表格行记录,把每一行都转换为一个对象。
我们可以通过反射动态实例化对象,再通过反射对对象的属性动态赋值。因为我们的对象即支持类也支持结构体,因此这里面就会遇到一个技术问题,正常的property.SetValue方法并没有办法给结构体动态赋值。
这是因为结构体是值类型,而property.SetValue方法的参数都是object,因此这里面就涉及到装箱拆箱,因此SetValue是设置了装箱以后的对象,而并不能改变原对象。
而解决办法就是先把结构体赋值给object变量,然后对object变量进行SetValue设置值,最后再把object变量转为结构体。
下面我们一起看看具体实现代码:
//把表格转换为对象集合
//如果设置DescriptionAttribute,则将特性值作为表格的列名称
//否则将属性名作为表格的列名称
public static IEnumerable<T> ToModels<T>(DataTable dataTable)
{
//T必须是结构体或类,并且不能是集合类型
AssertTypeValid<T>();
if (0 == dataTable.Rows.Count)
{
return [];
}
//获取T所有可写入属性
var properties = typeof(T).GetProperties().Where(u => u.CanWrite);
//校验表格是否能转换为对象
var isCanParse = IsCanMapDataTableToModel(dataTable, properties);
if (!isCanParse)
{
throw new NotSupportedException("The column name of the table cannot be mapped to an object property, and the conversion cannot be completed.");
}
var models = new List<T>();
foreach (DataRow dr in dataTable.Rows)
{
//通过反射实例化T
var model = Activator.CreateInstance<T>();
//把行数据映射到对象上
if (typeof(T).IsClass)
{
//处理T为类的情况
MapRowToModel<T>(dr, model, properties);
}
else
{
//处理T为结构体的情况
object boxed = model!;
MapRowToModel<object>(dr, boxed, properties);
model = (T)boxed;
}
models.Add(model);
}
return models;
}
//校验表格是否能转换为对象
private static bool IsCanMapDataTableToModel(DataTable dataTable, IEnumerable<PropertyInfo> properties)
{
var isCanParse = false;
foreach (var property in properties)
{
//根据属性获取列名
var columnName = GetColumnName(property);
if (!dataTable.Columns.Contains(columnName))
{
continue;
}
isCanParse = true;
}
return isCanParse;
}
//把行数据映射到对象上
private static void MapRowToModel<T>(DataRow dataRow, T model, IEnumerable<PropertyInfo> properties)
{
foreach (var property in properties)
{
//根据属性获取列名
var columnName = GetColumnName(property);
if (!dataRow.Table.Columns.Contains(columnName))
{
continue;
}
//获取单元格值
var value = dataRow[columnName];
if (value != DBNull.Value)
{
//给对象属性赋值
property.SetValue(model, Convert.ChangeType(value, property.PropertyType));
}
}
}
我们做个简单的单元测试:
[Fact]
public void ToModels()
{
//验证正常情况
var table = TableHelper.Create<Student<double>>();
var row1 = table.NewRow();
row1[0] = "Id-11";
row1[1] = "名称-12";
row1[2] = 33.13;
table.Rows.Add(row1);
var row2 = table.NewRow();
row2[0] = "Id-21";
row2[1] = "名称-22";
row2[2] = 33.23;
table.Rows.Add(row2);
var students = TableHelper.ToModels<Student<double>>(table);
Assert.Equal(2, students.Count());
Assert.Equal("Id-11", students.ElementAt(0).Id);
Assert.Equal("名称-12", students.ElementAt(0).Name);
Assert.Equal(33.13, students.ElementAt(0).Age);
Assert.Equal("Id-21", students.ElementAt(1).Id);
Assert.Equal("名称-22", students.ElementAt(1).Name);
Assert.Equal(33.23, students.ElementAt(1).Age);
}
02、把对象集合转换为表格
该方法首先会调用根据对象创建表格方法得到一个空白表格,然后通过反射获取对象的所有属性,然后循环处理对象集合,把一个对象的所有属性值一个一个添加行的所有列中,这样就完成了一个对象映射成表的一行记录,直至所有对象转换完成即可得到一个表格。
代码如下:
//把对象集合转为表格
//如果设置DescriptionAttribute,则将特性值作为表格的列名称
//否则将属性名作为表格的列名称
public static DataTable ToDataTable<T>(IEnumerable<T> models, string? tableName = null)
{
//创建表格
var dataTable = Create<T>(tableName);
if (models == null || !models.Any())
{
return dataTable;
}
//获取所有属性
var properties = typeof(T).GetProperties().Where(u => u.CanRead);
foreach (var model in models)
{
//创建行
var dataRow = dataTable.NewRow();
foreach (var property in properties)
{
//根据属性获取列名
var columnName = GetColumnName(property);
//填充行数据
dataRow[columnName] = property.GetValue(model);
}
dataTable.Rows.Add(dataRow);
}
return dataTable;
}
进行如下单元测试:
[Fact]
public void ToDataTable()
{
//验证正常情况
var students = new List<Student<double>>();
var student1 = new Student<double>
{
Id = "Id-11",
Name = "名称-12",
Age = 33.13
};
students.Add(student1);
var student2 = new Student<double>
{
Id = "Id-21",
Name = "名称-22",
Age = 33.23
};
students.Add(student2);
var table = TableHelper.ToDataTable<Student<double>>(students, "学生表");
Assert.Equal("学生表", table.TableName);
Assert.Equal(2, table.Rows.Count);
Assert.Equal("Id-11", table.Rows[0][0]);
Assert.Equal("名称-12", table.Rows[0][1]);
Assert.Equal("33.13", table.Rows[0][2].ToString());
Assert.Equal("Id-21", table.Rows[1][0]);
Assert.Equal("名称-22", table.Rows[1][1]);
Assert.Equal("33.23", table.Rows[1][2].ToString());
}
03、把一维数组作为一列转换为表格
该方法比较简单就是把一个一维数组作为一列数据创建一张表格,同时可以选择是否填写表名和列名。具体代码如下:
//把一维数组作为一列转换为表格
public static DataTable ToDataTableWithColumnArray<TColumn>(TColumn[] array, string? tableName = null, string? columnName = null)
{
var dataTable = new DataTable(tableName);
//创建列
dataTable.Columns.Add(columnName, typeof(TColumn));
//添加行数据
foreach (var item in array)
{
var dataRow = dataTable.NewRow();
dataRow[0] = item;
dataTable.Rows.Add(dataRow);
}
return dataTable;
}
单元测试如下:
[Fact]
public void ToDataTableWithColumnArray()
{
//验证正常情况
var columns = new string[] { "A", "B" };
var table = TableHelper.ToDataTableWithColumnArray<string>(columns, "学生表");
Assert.Equal("学生表", table.TableName);
Assert.Equal("Column1", table.Columns[0].ColumnName);
Assert.Equal(2, table.Rows.Count);
Assert.Equal("A", table.Rows[0][0]);
Assert.Equal("B", table.Rows[1][0]);
table = TableHelper.ToDataTableWithColumnArray<string>(columns, "学生表", "列");
Assert.Equal("列", table.Columns[0].ColumnName);
}
04、把一维数组作为一行转换为表格
该方法也比较简单就是把一个一维数组作为一行数据创建一张表格,同时可以选择是否填写表名。具体代码如下:
//把一维数组作为一行转换为表格
public static DataTable ToDataTableWithRowArray<TRow>(TRow[] array, string? tableName = null)
{
var dataTable = new DataTable(tableName);
//创建列
for (var i = 0; i < array.Length; i++)
{
dataTable.Columns.Add(null, typeof(TRow));
}
//添加行数据
var dataRow = dataTable.NewRow();
for (var i = 0; i < array.Length; i++)
{
dataRow[i] = array[i];
}
dataTable.Rows.Add(dataRow);
return dataTable;
}
05、行列转置
该方法是指把DataTable中的行和列互换,就是行的数据变成列,列的数据变成行。如下图示例:

这个示例转换,第一个表格中列名并没有作为数据进行转换,因此我们会提供一个可选项参数用来指示要不要把类目作为数据进行转换。
整个方法实现逻辑也很简单,就是以原表格行数为列数创建一个新表格,然后在循环处理原表格列,并把原表格一列数据填充至新表格的一行数据中,直至原表格所有列处理完成则完成行列转置。具体代码如下:
//行列转置
public static DataTable Transpose(DataTable dataTable, bool isColumnNameAsData = true)
{
var transposed = new DataTable(dataTable.TableName);
//如果列名作为数据,则需要多加一列
if (isColumnNameAsData)
{
transposed.Columns.Add();
}
//转置后,行数即为新的列数
for (int i = 0; i < dataTable.Rows.Count; i++)
{
transposed.Columns.Add();
}
//以列为单位,一次处理一列数据
for (var column = 0; column < dataTable.Columns.Count; column++)
{
//创建新行
var newRow = transposed.NewRow();
//如果列名作为数据,则先把列名加入第一列
if (isColumnNameAsData)
{
newRow[0] = dataTable.Columns[column].ColumnName;
}
//把一列数据转为一行数据
for (var row = 0; row < dataTable.Rows.Count; row++)
{
//如果列名作为数据,则行数据从第二列开始填充
var rowIndex = isColumnNameAsData ? row + 1 : row;
newRow[rowIndex] = dataTable.Rows[row][column];
}
transposed.Rows.Add(newRow);
}
return transposed;
}
下面进行简单的单元测试:
[Fact]
public void Transpose_ColumnNameAsData()
{
DataTable originalTable = new DataTable("测试");
originalTable.Columns.Add("A", typeof(string));
originalTable.Columns.Add("B", typeof(int));
originalTable.Columns.Add("C", typeof(int));
originalTable.Rows.Add("D", 1, 2);
//列名作为数据的情况
var table = TableHelper.Transpose(originalTable, true);
Assert.Equal(originalTable.TableName, table.TableName);
Assert.Equal("Column1", table.Columns[0].ColumnName);
Assert.Equal("Column2", table.Columns[1].ColumnName);
Assert.Equal(3, table.Rows.Count);
Assert.Equal("A", table.Rows[0][0]);
Assert.Equal("D", table.Rows[0][1]);
Assert.Equal("B", table.Rows[1][0]);
Assert.Equal("1", table.Rows[1][1].ToString());
Assert.Equal("C", table.Rows[2][0]);
Assert.Equal("2", table.Rows[2][1].ToString());
}
注:测试方法代码以及示例源码都已经上传至代码库,有兴趣的可以看看。https://gitee.com/hugogoos/Ideal
开源 - Ideal库 - Excel帮助类,TableHelper实现(三)的更多相关文章
- Pugixml一种快速解析XML文件的开源解析库
Pugixml是一个轻量级的C++ XML开源解析库,DOM形式的解析器.接口和丰富的遍历和修改操作,快速的解析,此外支持XPath1.0实现数据查询,支持unicode编码: 使用Pugixml可通 ...
- 导入导出Excel工具类ExcelUtil
前言 前段时间做的分布式集成平台项目中,许多模块都用到了导入导出Excel的功能,于是决定封装一个ExcelUtil类,专门用来处理Excel的导入和导出 本项目的持久化层用的是JPA(底层用hibe ...
- asp.net(C#) Excel导出类 导出.xls文件
---恢复内容开始--- using Microsoft.Office.Interop.Excel; 针对office 2003需添加引用Microsoft Excel 11.0 Obje ...
- 从Google开源RE2库学习到的C++测试方案
最近因为科研需求,一直在研究Google的开源RE2库(正则表达式识别库),库源码体积庞大,用C++写的,对于我这个以前专供Java的人来说真的是一件很痛苦的事,每天只能啃一点点.今天研究了下里面用到 ...
- 爆料喽!!!开源日志库Logger的剖析分析
导读 Logger类提供了多种方法来处理日志活动.上一篇介绍了开源日志库Logger的使用,今天我主要来分析Logger实现的原理. 库的整体架构图 详细剖析 我们从使用的角度来对Logger库抽茧剥 ...
- 爆料喽!!!开源日志库Logger的使用秘籍
日志对于开发来说是非常重要的,不管是调试数据查看.bug问题追踪定位.数据信息收集统计,日常工作运行维护等等,都大量的使用到.今天介绍著名开源日志库Logger的使用,库的地址:https://git ...
- [C#技术] .NET平台开源JSON库LitJSON的使用方法
一个简单示例: String str = "{’name’:’cyf’,’id’:10,’items’:[{’itemid’:1001,’itemname’:’hello’},{’itemi ...
- arcgis api for js之echarts开源js库实现地图统计图分析
前面写过一篇关于arcgis api for js实现地图统计图的,具体见:http://www.cnblogs.com/giserhome/p/6727593.html 那是基于dojo组件来实现图 ...
- arcgis api 3.x for js 之 echarts 开源 js 库实现地图统计图分析(附源码下载)
前言 关于本篇功能实现用到的 api 涉及类看不懂的,请参照 esri 官网的 arcgis api 3.x for js:esri 官网 api,里面详细的介绍 arcgis api 3.x 各个类 ...
- 开源 JSON 库解析性能对比( Jackson / Json.simple / Gson )
Json 已成为当前服务器与 web 应用之间数据传输的公认标准. 微服务及分布式架构经常会使用 Json 来传输此类文件,因为这已经是 webAPI 的事实标准. 不过正如许多我们习以为常的事情一样 ...
随机推荐
- Go实现常用的排序算法
一.插入排序 1.从第一个元素开始,该元素可以认为已经被排序 2.取出下一个元素,在已经排序的元素序列中从后向前扫描 3.如果该元素(已排序)大于新元素,将该元素移到下一位置 4.重复步骤3,直到找到 ...
- vuejs怎样封装一个插件(以封装vue-toast为例扩展)
插件介绍 插件通常会为 Vue 添加全局功能.插件的范围没有限制--一般有下面几种: 1.添加全局方法或者属性,如: vue-custom-element 2.添加全局资源:指令/过滤器/过渡等,如 ...
- 一个 tomcat 下如何部署多个项目?附详细步骤
一个tomcat下如何部署多个项目?Linux跟windows系统下的步骤都差不多,以下linux系统下部署为例.windows系统下部署同理. 一.不修改端口,部署多个项目 清楚tomcat目录结构 ...
- JavaScript——案例-表单验证
需求 <!DOCTYPE html> <html lang="en"> <head> <meta charset=" ...
- PHP提薪模块
在使用es搜索的时候需要注意以下这几点 文档(Document)与索引(Index):在ES中,文档是最小的数据单元,类似于数据库中的一行记录.文档组织在索引中,索引类似于数据库中的表.了解如何创建索 ...
- 对抗生成网络(GAN)简单介绍
对抗生成网络主要由生成网络和判别网络构成,GAN在图像领域使用较多.利用生成网络生成假的图像,然后利用判别器是否能判断该图像是假的. 1.用于医学图像分割,一般我们可以利用一个U-Net网络生成分割结 ...
- 2021年7月国产数据库排行榜:openGauss成绩依旧亮眼,Kingbase向Top 10发起冲刺
7月份的国产数据库流行度排行榜已经揭晓.本期榜单展示的136个数据库中,近三分之二实现了评分增长.笔者认为这与6月份中国信通院发布第十二批大数据产品能力评测结果有关,65家企业的120款产品通过了本次 ...
- 封装setItem 和 getItem 本地存储
store.js 文件 按需导出setItem 和 getItem 函数 :在utils文件里面 : export const setItem = (key, value) => { // 复杂 ...
- KubeSphere v4 全解析:揭秘您最关心的 12 大热点问题
为了助力大家更顺畅地使用 KubeSphere v4,我们精心汇总了十二个开发者高频关注的热点问题,这些问题全面覆盖了功能特性.性能表现.兼容性考量.安全保障以及升级流程等关键方面.接下来,我们将为大 ...
- 快速部署kafka集群和可视化界面
3台机器部署kafka集群的分布 10.1.161.111 -> kafka(1个节点)+ zookeeper(一个节点)+ kowl(一个节点) 10.1.161.112 -> kafk ...