kettle入门教程：第一个kettle小例子

通过Kettle工具的转换来实现将一张数据表中的两个字段进行拼接，然后插入到另一张数据表中。即将数据表personal_a中的字段surname和name进行拼接，然后插入到数据表personal_b。

本文摘要：文章详细介绍了Kettle工具的使用技巧，包括驱动配置、组件操作和数据处理方法。主要内容有：1)解决MySQL驱动缺失问题；2)子映射组件的使用方法；3)文本文件读取和Java组件处理；4)字段选择和字符串拼接操作；5)MySQL数据聚合查询；6)表数据迁移；7)Java组件操作Redis的完整示例；8)后台运行Kettle作业的方法。文中提供了多个实际案例的配置步骤和代码实现，重点展示了Kettle与Java代码、Redis的集成应用。

一、加载日期数据至日期维度表 通过Kettle工具加载日期数据至dim_date日期维度表。 1、打开kettle工具，创建转换 使用Kettle工具，创建一个转换load_dim_date，并添加生成记录控件、增加序列控件、JavaScript代码控件、表输出控件以及Hop跳连接线，具体如图所示 2、配置生成记录控件 双击“生成记录”控件，进入“生成记录”配置界面。 在“限制”处添加生成的日期，默认为10，这里改为3650，即生成10年的日期（10*365）；在“字段”框添加字段lan.

kettle脚本实例说明 病人基本信息表数据转换脚本 这个脚本主要包含数据的插入更新。插入更新数据是根据病区、病房、病床三个字段为主键进行判断。来选择是插入数据还是更新数据 His映射转换是源数据视图和his映射表根据病区、病房、病床进行内连接，把院方的病区病房病床转换为我们系统的病区病房病床 javaScript组件是可以进行编码的,可以进行一些特殊的操作,比如年龄后面增加岁,计算金额等一系列操...

Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，数据抽取高效稳定。其中，Spoon是Kettle中的一个组件，其他组件有PAN，CHEF，Encr和KITCHEN等，Spoon通过图形化的页面，方便直观的让你完成数据转换的操作。第一步：安装jdk1、官网http://www.oracle.com/technetwork/java/javase...

目录1.kettle叙述1.1什么是kettle1.2kettle工程存储方式1.3kettle两种设计1.4kettle的组成1.5kettle的下载安装2.kettle教程2.1转换2.1.1普通转换2.1.2执行sql脚本2.1.3条件判断Switch Case2.1.4自定义java代码2.2作业Kettle是一款开源的ETL(Extract-Transform-Load)工具，纯java编写，可以在Window、Linux、Unix上运行，绿色无需安装，数据抽取高效稳定。（1）以XML形式存储 （

Kettle是一款国外开源的ETL工具，纯java编写，可以在Window、Linux、Unix上运行，数据抽取高效稳定。其中，Spoon是Kettle中的一个组件，其他组件有PAN，CHEF，Encr和KITCHEN等。Spoon通过图形化的页面，方便直观的让你完成数据转换的操作。1、安装配置点我下载最新版本是7.1，小编这里使用的是6.1。下载完毕后，解压即可。因为是Java编写的，需要jdk环

最近做的项目用到了ETL工具Kettle，这个工具相当好用，可以将各种类型数据作为数据流，经过处理后再生成各种类型的数据。正如其名“水壶”，将各个地方的水倒进水壶里，再用水壶倒入不同的容器。不过一来初学乍用，二来对此任务不是很感兴趣，研究的不是很深入，可能是以一种不科学的方法使用的，但观教程，常用的内容似乎也涉及到了，并且Y大说过，要善于总结，于是有了这篇，作为入门说明吧。一、下载与安装官网地址大...

上一篇文章我们介绍了一下Kettle以及Kettle的安装部署，本文我们来具体看几个例子，看看Kettle是怎样使用的。使用示例我们基于Windows安装的Kettle进行演示说明。关注专栏《破茧成蝶——大数据篇》，查看更多相关的内容~ 一、案例一 1、需求 把stu1的数据按id同步到stu2，stu2有相同id则更新数据。 2、在MySQL中创建两张表并插入一些数据 create table stu1(id int,name varchar(20),age int); create tabl

工具，创建转换incremental_load，并添加如下控件及Hop跳连接线。修改源数据表中数据，新增第六行数据，将第二行数据的age修改为25。运行转换incremental_load并查看目标表。添加目标数据表incremental_target。添加源数据表incremental_source。配置“插入/更新”控件。

在“第一个步骤”处的下拉框中选择“字段选择”控件，“第二个步骤”处的下拉框中选择“表输入3”控件，用于将“字段选择”控件流中的数据与“表输入3”控件流中的数据进行合并连接；在“第一个步骤的连接字段”和“第二个步骤的连接字段”处添加连接字段，这里添加的连接字段是brand、model，用于将“字段选择”控件流中的字段brand、model与“表输入3”控件流中的字段brand、model进行连接；双击“表输入”控件，进入“表输入”配置界面，具体如图所示。双击“表输入2”控件，进入“表输入”配置界面。

一.转换 二.作业

目录Kettle入门案例Kettle输入/输出组件输入组件表输入生成记录输出组件表输出 Kettle入门案例 需求： 把数据从CSV文件抽取到Excel文件 1、在Kettle中新建转换 2、拖拽一个CSV输入组件、一个Excel输出组件、并按住Shift拖动鼠标连接两个组件 3、配置CSV输入组件、Excel输出组件 具体实现： 1、新建转换 2、拖拽一个CSV输入组件、一个Excel输出组件、并按住Shift拖动鼠标连接两个组件 shift+拖拉是连线 3、配置CSV输入组件 选择要进行导入的C

需求： 从数据库的user表中读取所有用户数据，性别为男的用户导出到一个Excel，性别为女的用户导出到一个Excel，其他导出到一个Excel 具体步骤： 1.建立转换 根据需求进行输出（Create a new target case for this step） 2.设置输入 各步骤的作用在之前的博客有详细说明 3. 设置中间组件 4.设置输出：男女其他三个表的设置几乎一样，以男为例演示 每步的作用可见之前的博客 5.保存运行 看似转换成功，其他这张表...

在构建回归模型时，如果自变量X为连续性变量，回归系数β可以解释为：在其他自变量不变的条件下，X每改变一个单位，所引起的因变量Y的平均变化量；如果自变量X为二分类变量，例如是否饮酒（1=是，0=否），则回归系数β可以解释为：其他自变量不变的条件下，X=1（饮酒者）与X=0（不饮酒者）相比，所引起的因变量Y的平均变化量。但是，当自变量X为多分类变量时，例如职业、学历、血型、疾病严重程度等等，此时仅用一...

本文介绍使用【插入/更新】转换到另一个表中

最近在做ms sql数据库移植oracle上的工作，之前用的ms sql自己的导出功能，今天经理说了句水壶，上网查了好久才知道说的是kettle！ 废话少说上图： kettle下载地址： http://community.pentaho.com/projects/data-integration/ 我下载的 Data Integration 5.4.0 Stable 值得一说是需要事先安装

参考自 李蒙强 的博客：《ETL利器Kettle实战应用解析系列二》 并重新配图首先建表并插入数据三张事实表drop table aa_cust; create table aa_cust --客户表 ( custno int, --客户号 custname varchar(32), --客户名称 custid varchar(32), --客户编码 cus