接触kettle已经还是有一段时间了,但是一直都使用简单的输入.输出(二维数据库to二维数据库).今天,突然接到一个需求,需要从多维数据库(CUBE)里面将数据抽取到二维数据库,我难住了,不知道该如何做,百度了很久没有结果,最后只有一个一个的看每个控件的作用,最后终于成功了,虽然这不是一个技术难题,但是觉得自己进步了特别高兴,恰好看到很多大牛们都有自己的博客,于是我也来一篇,希望看到的人不要见笑,O(∩_∩)O哈哈~…

Kettle的应用——对mysql数据进行表输入与导出 1. 下载好kettle解压包 网址:http://sourceforge.net/projects/pentaho/files/Data%20Integration/7.0/pdi-ce-7.0.0.0-25.zip/download 下载好是一份这样的文件 2. 解压kettle解压包 解压后你看到如下一份文件: 进到data-integration目录下看一下所有的文件如下: 3.导入mysql的jar包到data-integrati…

在xmanager中的xshell运行进入图形化界面 sh spoon.sh 新建一个job…

使用jdbc的方式访问kylin cube的数据 引用kylin相关的jar包 <dependency> <groupId>org.apache.kylin</groupId> <artifactId>kylin-jdbc</artifactId> <version>1.6.0</version> </dependency> <dependency> <groupId>org.apach…

今天试验了如何在Kettle的图形界面(Spoon)下面来整合来mysql 数据库中位于不同数据库中的数据表中的数据. 试验用的数据表是customers: 第三方的数据集下载地址是:http://www.mysqltutorial.org/download/2 Customers: stores customer’s data. 折叠处有对数据表customer结构的sql表示: DROP TABLE IF EXISTS `customers`; CREATE TABLE `customers…

SQLite作为一种数据库可以配置为Kettle的数据输入和输出,这个例子是从Excel中抽取数据然后写入到SQLite中 配置测试并成功后如下 下面是配置步骤: Excel输入配置 sqlite配置如下 选择表输入控件,建立数据库连接,选择连接类型 Generic database ,连接方式Native(jdbc), 自定义连接URL:jdbc:sqlite:E:/temp/20171205/ps_manager_grid.db 自定义驱动类型 org.sqlite.JDBC 保存测试成功…

通过excel进行高速开发报表: 建设思路: 1.首先制订相关的execl模板. 2.通过etl工具(kettle)能够高速的 将数据库中的数据按excel模板导出成新的excel就可以. 当中kettle 按excel模板导出excel 能够參考: http://type-exit.org/adventures-with-open-source-bi/2010/12/using-the-excel-writer-step/ 或可在我的资源中找.…

http://wiki.pentaho.com/display/BAD/Loading+Data+into+HDFS 新建job…

定时执行脚本 使用SPOON 工具建立好转换文件 .ktr,创建下面的.BAT文件,用操作系统的任务调用批处理. G:\soft\data-integration\pan.bat /norep -file=G:\soft\ERPCSN.ktr>>G:\ERPCSN.log…

网上搜集了一些关于开源数据交换工具Kattle的文章,特收藏例如以下: 文章一:ETL和Kettle简单介绍 ETL即数据抽取(Extract).转换(Transform).装载(Load)的过程.它是构建数据仓库的重要环节.数据仓库是面向主题的.集成的.稳定的且随时间不断变化的数据集合,用以支持经营管理中的决策制定过程.数据仓库系统中有可能存在着大量的噪声数据,引起的主要原因有:滥用缩写词.惯用语.数据输入错误.反复记录.丢失值.拼写变化等.即便是一个设计和规划良好的数据库系统,假设当中存在着…