RestCloud ETL社区版是一款数据集成工具，提供可视化多数据管道构建、数据源管理、运行监控及权限管理功能。

 

本篇将使用多行转多列的方式把下方图中的表数据进行简化。

简化思路：把相同姓名中不同的学科成绩转成列名，将数据库中三行数据转变成一行数据显示。

 

首先是流程设计

这里使用了三个组件，分别是库表输入、多行转换为多列、库表输出，库表输入获取表数据，再由多行转多列将数据结构重新分配，再借由库表输出将数据输出成一个新的数据库表。

 

组件配置

 

1.库表输入

这里主要是用于获取数据，只需要配置数据源以及数据库表，确保能够输入数据即可，其它采用自动生成的就行了。

 

2.多行转多列

在数据所在的节点中选中源数据所在的节点，获取需要进行转换的数据。

分组字段中选中要进行分组的字段，比如根据上面的数据库，同一名字下有三个学科的成绩，那就可以选中XM这个字段。

关键字段id这里就是要选择将值转为列的字段。

这里根据基本属性中选中的关键字段id，获取关键字段id里的值，再根据这个值去获取数据字段里对应的数据放到对应的新的目标字段中。

3.库表输出

这里选择输出的数据源，以及表名。

字段配置中需要配置输出的字段以及转换后的新的目标字段，去掉不需要的字段。如已经作为条件变成了列名的KCMC字段和值已经赋给了新字段的CJ字段。

输出时不要忘记，若是新表则需要选择自动创建表。

完成配置后运行流程。

在日志中可以看见提示了创建表成功以及成功插入了数据。

数据库中也成功写入了数据。

感谢您对我们的关注和支持！如需了解更多的功能，请加入RestCloud ETL社区免费下载体验，下载地址：https://etl.restcloud.cn

Restcloud ETL实践之数据行列转换的更多相关文章

  1. 一、ETL实践之数据可视化架构

    开篇心声: 不管是学习新知识,还是遇到各种难题,总能在技术论坛找到经验帖子.一直享受大家提供的帮助,而自己没有任何输出,实在过意不去.我相信技术是经验的交流,思维的碰撞. 这是我一次写技术分享文章,我 ...

  2. SQL实现数据行列转换

    前言: 在日常的工作中,使用数据库查看数据是很经常的事,数据库的数据非常多,如果此时的数据设计是一行行的设计话,就会有多行同一个用户的数据,查看起来比较费劲,如果数据较多时,不方便查看,为了更加方便工 ...

  3. 【转】Spark实现行列转换pivot和unpivot

    背景 做过数据清洗ETL工作的都知道,行列转换是一个常见的数据整理需求.在不同的编程语言中有不同的实现方法,比如SQL中使用case+group,或者Power BI的M语言中用拖放组件实现.今天正好 ...

  4. 在Sqlserver下巧用行列转换日期的数据统计

    在Sqlserver下巧用行列转换日期的数据统计 前言 在SQLSERVER 中有很多统计函数的基础语法,有使用Group By 或 partition by 后配合Sum,Count(*) 等用法. ...

  5. SQL pivot 基本用法 行列转换 数据透视

    SQL通过pivot进行行列转换 数据透视 可直接在sql server 运行 传统操作 和 pivot create table XKCl (name nchar(10) not null, 学科 ...

  6. SQL 行列转换数据转换为字符串

    行列转换,将列数据转换为字符串输出 ) SET @center_JZHW = ( SELECT DISTINCT STUFF( ( SELECT ',' + ce_code FROM ap_cente ...

  7. SQL Fundamentals: 子查询 || 行列转换(PIVOT,UNPIVOT,DECODE)，设置数据层次(LEVEL...CONNECT BY)

    SQL Fundamentals || Oracle SQL语言 子查询(基础) 1.认识子查询 2.WHERE子句中使用子查询 3.在HAVING子句中使用子查询 4.在FROM子句中使用子查询 5 ...

  8. 数据透视表sql:用SQL行列转换实现数据透视的一些思考

    用SQL行列转换实现数据透视的一些思考 摘要:根据对报表开发过程中碰到的需要用SQL行列转换进行解决的一类查询统计问题的分析,逐步探索求解得到一种较通用的解决思路,并用函数进行实现.该解决思路及函数实 ...

  9. 数据仓库建模与ETL实践技巧

    数据分析系统的总体架构分为四个部分 —— 源系统.数据仓库.多维数据库.客户端(图一:pic1.bmp) 其中,数据仓库(DW)起到了数据大集中的作用.通过数据抽取,把数据从源系统源源不断地抽取出来, ...

  10. ETL实践--Spark做数据清洗

    ETL实践--Spark做数据清洗 上篇博客,说的是用hive代替kettle的表关联.是为了提高效率. 本文要说的spark就不光是为了效率的问题. 1.用spark的原因 (如果是一个sql能搞定 ...

随机推荐

  1. 一个清除数组的方法在 Kotlin、Java、C#和Nim上的性能测试

    起因 我的一个项目使用 Kotlin 编写,他是一个多维数据库应用程序,所以会非常频繁的操作 int 数组,其中有段程序就需要进行 几亿次的数组清除动作,类似这样的代码: Arrays.fill(ta ...

  2. 使用IDEA构建SpringBoot应用镜像

    目录 前置设置 编写Dockerfile文件 添加运行配置 前置设置 确保IDEA已经设置了服务器Docker的信息.[1] 确保您有可运行的SpringBoot项目 编写Dockerfile文件 D ...

  3. 使用 Go-Spring 构建最小 Web API

    前言 Go 语言以简单著称,一个很明显的例子就是只需要很少的代码即可实现一个最小的 Web API .Go-Spring 融合了 Go 简单和 Spring 自动配置的优点.本文通过几个实现最小 We ...

  4. XGBooost算法原理及Python实现

    一.概述   XGBoost 是一种基于梯度提升框架的机器学习算法,它通过迭代地训练一系列决策树来构建模型.核心思想是通过不断地在已有模型的基础上,拟合负梯度方向的残差(真实值与预测值的差)来构建新的 ...

  5. 【FAQ】HarmonyOS SDK 闭源开放能力 — PDF Kit

    1.问题描述: 预览PDF文件,文档上所描述的loadDocument接口,可以返回文件的状态,并无法实现PDF的预览,是否有能预览PDF相关接口? 解决方案: 1.执行loadDocument进行加 ...

  6. Excel 的 vlookup 函数

    突然发现, 大多数的开发, 都不会用 Excel. 想想, 像我这种, 熟练Excel 的函数如 vlookup, sumifs, contif 还会透视表的小哥哥, 已经不多了啦.

  7. .NET 原生驾驭 AI 新基建实战系列（七）：Weaviate ── 语义搜索的智能引擎创新者

    引言 随着人工智能和机器学习技术的迅猛发展,向量数据在推荐系统.自然语言处理.图像搜索等领域的应用日益广泛.传统的数据库在处理高维向量数据时往往面临性能瓶颈,而向量数据库的出现为这一问题提供了高效的解 ...

  8. codeup之比较奇偶数个数

    Description 第一行输入一个数,为n,第二行输入n个数,这n个数中,如果偶数比奇数多,输出NO,否则输出YES. Input 输入有多组数据. 每组输入n,然后输入n个整数(1<=n& ...

  9. 基于ROS2/MoveIt!的工业机械臂控制系统开发全攻略

    1. 系统架构设计 1.1 系统组成模块 [Vision System] --> [Perception Node] | | [Gazebo Sim] <--> [ROS2 Cont ...

  10. Axios,fetch,ajax的区别

    axios1.是一个常用的http库,可用于浏览器和nodejs的客户端:2.同时处理并发请求:3.拦截器(请求拦截器interceptors.request.响应拦截器interceptors.re ...