kettle教程

  • 什么是ETL? 一、ETL概念之背景 随着企业的发展,目前的业务线越来越复杂,各个业务系统独立运营。例如:CRM系统只会生产CRM的 数据;Billing只会生产Billing的数据。各业务系统之间只关心自己的数据,导致各业务系统之间数据相互独立...
  • 一、什么是kettle Kettle最早是一个开源的ETL工具,全称为KDE Extraction, Transportation, Transformation and Loading Environment。在2006年,Pentaho公司...
  • kettle作业调度,附件(excel)配置表名,一个调度完成所有的表操作 欢迎关注笔者的公众号: java大师, 观看教学视频 KETTLE4个工作中有用的复杂实例--2、两表数据比较,比较后自动同步(部门、单位数据同步) 二、两表数据比...
  • kettle作业调度,附件(excel)配置表名,一个调度完成所有的表操作 欢迎关注笔者的公众号: java大师, 观看教学视频 在平时工作当中,会遇到这种情况:复制一个库,几百甚至上千张表,并且无法设置dblink,此时通过kettle可...
  • kettle作业调度时间戳 欢迎关注笔者的公众号: java大师, 观看教学视频 本文接上一篇,只写到读取日志。在平时工作当中,会遇到这种情况,而且很常见。比如:增量抽取(每隔2个小时抽取截至到上次抽取时间的记录) 本文中会用到作业,先来熟...
  • kettle教程---增量更新 欢迎关注笔者的公众号: java大师, 观看教学视频 以下操作都在5.0.1版本下进行开发,其余版本可以进行自动比对 在平时工作当中,会遇到这种情况,而且很常见。比如:增量抽取(每隔2个小时抽取截至到上次抽取时...
  • KETTLE多表关联的同步一张表的两种实现方式 欢迎关注笔者的公众号: java大师, 观看教学视频 以下操作都在5.0.1版本下进行开发,其余版本可以进行自动比对 在平时工作当中,会遇到这种情况,而且很常见。比如:读取对方的多个视图或者表,...
  • KETTLE单表同步,写入EXCEL和TXT 附:Kettle实战视频教程,需要的朋友可以关注公众号:java大师 以下操作都在5.0.1版本下进行开发,其余版本可以进行自动比对 在平时工作当中,会遇到这种情况,而且很常见。比如:1、自动生成...
  • KETTLE入门教程-单表读取 附:Kettle实战视频教程,需要的朋友可以关注公众号:java大师 Kettle简介:Kettle是一款国外开源的ETL工具,纯java编写,可以在Window、Linux、Unix上运行,数据抽取高效稳定...
  • kettle教程--通过配置文件同步所需要的列数据 欢迎关注博主公众号「Java大师」, 专注于分享Java领域干货文章, 关注回复「kettle」, 免费领取全网最热的kettle实战视频教程 http://www.javaman.cn/ket...
kettle作业调度,附件(excel)配置表名,一个调度完成所有的表操作 - idea激活- IntelliJ IDEA 2021.1激活码破解教程(亲测激活至 2099 年,长期更新)- 爪哇男教程  

kettle作业调度,附件(excel)配置表名,一个调度完成所有的表操作

欢迎关注笔者的公众号: java大师, 观看教学视频

在平时工作当中,会遇到这种情况:复制一个库,几百甚至上千张表,并且无法设置dblink,此时通过kettle可以快速完成该任务。 按照正常的调度,有几百张表,咱们就要写几百个转换去处理,很不科学,下面笔者就给大家带来通过一个配置完成所有的全量表操作(后面的文章会带来增量) 如下图,我们需要建一个总的调度作业,包括一个转换和一个作业 在这里插入图片描述

1)【转换】,我们打开转换看到如下,包含【excel输入】,按照浏览,再添加加入文件,工作表获取工作表名称,字段选择对应的字段。

在这里插入图片描述 在这里插入图片描述

在这里插入图片描述 在这里插入图片描述

将结果复制到【复制记录到结果】 2)作业【全量更新表】,包含以下3个转换

在这里插入图片描述

2.1)转换【设置表名】,如果所示设置相应内容

在这里插入图片描述

2.2)sql脚本【删除历史数据】,如果所示设置相应内容

在这里插入图片描述

2.3)如图所示,设置相应的表输入和表输出选项

在这里插入图片描述 3)点击运行,完成配置表的同步 在这里插入图片描述

4)excel的内容如下:

在这里插入图片描述 通过添加excel表的表名,实现一个调度任务,完成所有表的同步

欢迎关注公众号【大喇叭玩转数据库】,学习kettle、数据库和开发方面的知识

获取例子源码


全部评论: 0

    我有话说: