kettle教程

  • 什么是ETL? 一、ETL概念之背景 随着企业的发展,目前的业务线越来越复杂,各个业务系统独立运营。例如:CRM系统只会生产CRM的 数据;Billing只会生产Billing的数据。各业务系统之间只关心自己的数据,导致各业务系统之间数据相互独立...
  • 一、什么是kettle Kettle最早是一个开源的ETL工具,全称为KDE Extraction, Transportation, Transformation and Loading Environment。在2006年,Pentaho公司...
  • kettle作业调度,附件(excel)配置表名,一个调度完成所有的表操作 欢迎关注笔者的公众号: java大师, 观看教学视频 KETTLE4个工作中有用的复杂实例--2、两表数据比较,比较后自动同步(部门、单位数据同步) 二、两表数据比...
  • kettle作业调度,附件(excel)配置表名,一个调度完成所有的表操作 欢迎关注笔者的公众号: java大师, 观看教学视频 在平时工作当中,会遇到这种情况:复制一个库,几百甚至上千张表,并且无法设置dblink,此时通过kettle可...
  • kettle作业调度时间戳 欢迎关注笔者的公众号: java大师, 观看教学视频 本文接上一篇,只写到读取日志。在平时工作当中,会遇到这种情况,而且很常见。比如:增量抽取(每隔2个小时抽取截至到上次抽取时间的记录) 本文中会用到作业,先来熟...
  • kettle教程---增量更新 欢迎关注笔者的公众号: java大师, 观看教学视频 以下操作都在5.0.1版本下进行开发,其余版本可以进行自动比对 在平时工作当中,会遇到这种情况,而且很常见。比如:增量抽取(每隔2个小时抽取截至到上次抽取时...
  • KETTLE多表关联的同步一张表的两种实现方式 欢迎关注笔者的公众号: java大师, 观看教学视频 以下操作都在5.0.1版本下进行开发,其余版本可以进行自动比对 在平时工作当中,会遇到这种情况,而且很常见。比如:读取对方的多个视图或者表,...
  • KETTLE单表同步,写入EXCEL和TXT 附:Kettle实战视频教程,需要的朋友可以关注公众号:java大师 以下操作都在5.0.1版本下进行开发,其余版本可以进行自动比对 在平时工作当中,会遇到这种情况,而且很常见。比如:1、自动生成...
  • KETTLE入门教程-单表读取 附:Kettle实战视频教程,需要的朋友可以关注公众号:java大师 Kettle简介:Kettle是一款国外开源的ETL工具,纯java编写,可以在Window、Linux、Unix上运行,数据抽取高效稳定...
  • kettle教程--通过配置文件同步所需要的列数据 欢迎关注博主公众号「Java大师」, 专注于分享Java领域干货文章, 关注回复「kettle」, 免费领取全网最热的kettle实战视频教程 http://www.javaman.cn/ket...
kettle教程---增量更新 - idea激活- IntelliJ IDEA 2021.1激活码破解教程(亲测激活至 2099 年,长期更新)- 爪哇男教程  

kettle教程---增量更新

欢迎关注笔者的公众号: java大师, 观看教学视频

以下操作都在5.0.1版本下进行开发,其余版本可以进行自动比对

在平时工作当中,会遇到这种情况,而且很常见。比如:增量抽取(每隔2个小时抽取截至到上次抽取时间的记录)

一、操作前提:

存在3张表,源表(t_student),同步日志表(t_tbrz),插入表(t_target_student),表结构如下图所示

在这里插入图片描述

学生表

在这里插入图片描述

同步日志表 在这里插入图片描述

待插入学生表 二、kettle操作

在这里插入图片描述

1)如上图所示,需要4个控件,可以在核心对象中选择拖入主界面

在这里插入图片描述

2)如上图所示,在sql里写入以上sql语句,点击确定

在这里插入图片描述

3)如上图所示,点击设置变量,点击获取字段,点击确定

在这里插入图片描述

4)如上图所示,点击《获取student数据表输入》,写入sql语句,点击确定

在这里插入图片描述

5)如上图所示,点击表输入,进入表输入界面,点击浏览按钮,选中需要插入的表

在这里插入图片描述 准备测试创建时间是12月12号的记录,此时修改同步日志表如下图

在这里插入图片描述 在这里插入图片描述

点击运行

运行结果如下,只根据日期选择了2019/12/12 0:53:47之】后创建的数据

在这里插入图片描述 欢迎关注公众号【大喇叭玩转数据库】,学习数据库,获取更多示例程序 在这里插入图片描述


全部评论: 0

    我有话说: