kettle工具的作用和使用「建议收藏」

全栈程序员-站长 • 2022年10月16日下午9:00 • 未分类 • 阅读 0

kettle工具的作用和使用「建议收藏」最近公司一个同事离职，由我来接手他手上的一个项目，我负责开发后台，因为设计到脚本统计数据，需要做定时任务将日表数据统计到月表或者年表。于是该项目用到了Kettle，用了之后才发现，这是个好东西啊。一.了解Kettle工具Kettle最早是一个开源的ETL工具，以Java开发，支持跨平台运行，其特性包括：支持100%无编码、拖拽方式开发ETL数据管道；可对接包括传统数据库、文件、大数据平台、接口、流数据等数据源；支持ETL数据管道加入机器学习算法。二.Kettle下载和安装1.官网下载地址：https

Jetbrains全系列IDE稳定放心使用

最近公司一个同事离职，由我来接手他手上的一个项目，我负责开发后台，因为设计到脚本统计数据，需要做定时任务将日表数据统计到月表或者年表。于是该项目用到了Kettle，用了之后才发现，这是个好东西啊。

一.了解Kettle工具

Kettle最早是一个开源的ETL工具，以Java开发，支持跨平台运行，其特性包括：支持100%无编码、拖拽方式开发ETL数据管道；可对接包括传统数据库、文件、大数据平台、接口、流数据等数据源；支持ETL数据管道加入机器学习算法。

二.Kettle下载和安装

1.官网下载地址：https://sourceforge.net/projects/pentaho/files/Data%20Integration/
2.Kettle是纯JAVA编程的开源软件，本地环境配置JDK1.7以上即可运行，解压后直接使用无需安装。
3.准备连接数据库的驱动
数据库驱动，驱动一般放在kettle根目录的bin或者lib下面，然后到服务中启动mysql，重启kettle。

三.Kettle使用

1.运行Spoon.bat,打开spoon图形工具

在这里插入图片描述

2.创建连接资源库

这里测试，用我本地两个不同的数据库（mysql，oracle）做一个数据的转换

a.新建–转换

在这里插入图片描述

b.添加db数据源

在这里插入图片描述

c.添加一个表输入和表输出

在这里插入图片描述

d.表输入编辑

在这里插入图片描述

e.表输出编辑

在这里插入图片描述

f.运行这个转换

在这里插入图片描述

g.查看表数据是否已经成功转换过来

在这里插入图片描述

h.最后将这个文件保存的时候，生成一个ktr文件。

在这里插入图片描述

再我的日常开发中，将这个ktr脚本文件放在主机目录上，通过的命令定时每月一号零点运行，就可以将日表统计的数据，导入到月表中。

后续还有很多值得研究和学习的地方，可以慢慢挖掘，这里只是做个简单的测试。

版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至举报，一经查实，本站将立刻删除。

发布者：全栈程序员-站长，转载请注明出处：https://javaforall.net/181223.html原文链接：https://javaforall.net

赞 (0)

全栈程序员-站长

0 0

视频识别的基础概念[通俗易懂]

视频识别的基础概念[通俗易懂]视频识别一、视频识别几大问题2、常见的解决方案iDTTwo-StreamTSNC3DTDDRNNRPAN一、视频识别几大问题未修剪视频分类(UntrimmedVideoClassification)：通过对输入的长视频进行全局分析，然后软分类到多个类别修剪视频识别(TrimmedActionRecognition)：给出一段只包含一个动作的修剪视频，要求给视频分类时序行为提名(TemporalActionProposal)：从长视频中找出可能含有动作的视频段时序行为定位(Tempor

全栈程序员-站长
2022年4月29日
linux图形界面扩容lvm,linux下对LVM扩容

linux图形界面扩容lvm,linux下对LVM扩容操作环境：VirtualBox下RedHat6.464位版本扩容原因：/dev/vg_rhel64/lv_root占用率达到100%,导致部分应用无法继续运行操作过程：1.关闭系统，在虚拟机中添加一块10G的磁盘2.查看新添加磁盘对应的名称[root@rhel64~]#fdisk-cul得知磁盘对应名称为/dev/sdc3.给sdc分区，只分一个区sdc1[root@rhel64…

全栈程序员-站长
2022年6月20日
perl 正则表达式匹配字符串或逻辑

perl 正则表达式匹配字符串或逻辑mark，备忘#!/usr/local/bin/perlusestrict;usewarnings;my@data=qw(nihaowohao);foreach(@data){if($_=~/^(ni|wo)hao$/){print$_}}

全栈程序员-站长
2022年5月18日
java下载文件或文件夹

java下载文件或文件夹最近接到一个需求，就是将远程目录下的文件或文件夹下载到指定目录下，下面来看下最后的成果。1.首先，IO流输出文件（可以在浏览器端下载）publicHttpServletResponsedownload(StringfileName,HttpServletResponseresponse){Filefile=newFile(gitConfig.getDestPath()+”/”+fileName);if(file.isDirec

全栈程序员-站长
2022年7月8日
bigdecimal类型比较大小「建议收藏」

bigdecimal类型比较大小「建议收藏」比较方法：BigDecimal类提供compareTo()方法来比较两个数的大小，例如：a=b返回0，a<b返回-1，a>b返回1，通过这三种比较返回的结果，我们还可“以比较a!=b、a>=b和a<=b这三种情况。importjava.math.BigDecimal;publicclassApplication{publicstaticvoidmain(String[]args){BigDecimala

全栈程序员-站长
2022年7月14日
jquery关于checkbox选中和不选中的问题

jquery关于checkbox选中和不选中的问题近期由于项目需要，用到了列表checkbox，在点击被考核人的一行时，check不选中，然后解决方法是 //点击被考核人列表 $(“table.be_assess-employee-container”).on(“click”,”tr.content”,function(){ if($(this).hasClass(“on”)){

全栈程序员-站长
2022年6月29日

发表回复

关注全栈程序员社区公众号