数据对接—kettle使用之五

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介:

介绍完表输入插件,这一篇我们继续介绍kettle中的获取系统信息插件,并将结合表输入插件演示它的其中的一种用途。首先熟悉一下获取系统信息插件的一些功能:

获取系统信息

1、系统日期(可变):系统时间,每次访问都在改变。

2、系统日期(固定):系统时间,有转换开始来决定。即转换开始时间

3、开始日期范围(转换):根据etl日志表的信息,确定日期范围的开始。

4、结束日期范围(转换):根据etl日志表的信息,确定日期范围的结束。

5、开始日期范围(作业):根据etl日志表的信息,确定日期范围的开始

6、结束日期范围(作业):根据etl日志表的信息,确定日期范围的结束。

7、昨天00:00:00:昨天的开始

8、昨天23:59:59:昨天的结束

9、今天00:00:00:今天的开始

10、今天23:59:59:今天的结束

11、上个月第一天的00:00:00:上个月的开始

12、上个月最后一天的23:59:59:上个月结束

13、本月的第一天00:00:00:这个月的开始

14、本月的最后一天23:59:59:这个月的结束

15、步骤拷贝:复制步骤

16、转换名称:转换的名称

17、转换的文件名:转换的文件名(仅针对XML)

18、最后修改转换的用户

19、转换的最后修改日期

20、转换ID:日志表中的批处理ID值

22、主机名:返回服务器的主机名

23、IP地址:返回服务器的IP地址

24、命令行参数1:命令行的第一个参数。

25、Kettle版本:返回Kettle的版本。

26:Kettle编译版本:返回Kettle核心库的编译版本

27:Kettle编译日起:Kettle核心库的编译日期

…  …

如下图(只显示出部分内容):


使用实例:

1、首先拖入获取系统信息插件,双击打开输入时间名称并选择类型(参考上面的介绍),本例获取当天时间,如下图:


2、拖入表输入插件,根据之前的学习,连接数据库选择表,还可以预览表里的数据,如下图:


3、将两个插件连起来,由获取系统信息插件给表输入插件传递需要的参数,sql语句里的问号就是读取传过来的参数的位置,这样根据上一步传过来的值作为条件来查询我们需要的数据,选择从步骤插入数据并选择获取系统信息插件,然后勾选执行每一行,如下图:


4、最后运行并预览数据,还可以看到具体执行的步骤哦,如下图:



总结:获取系统信息的插件功能非常强大,它可以帮助我们获取我们需要的各种系统信息,也支持我们自定的一些系统信息,有了它让我们写的脚本功能更加强大,更加简单灵活。

相关实践学习
【涂鸦即艺术】基于云应用开发平台CAP部署AI实时生图绘板
【涂鸦即艺术】基于云应用开发平台CAP部署AI实时生图绘板
目录
相关文章
|
SQL Oracle 关系型数据库
【Oracle】玩转Oracle数据库(七):RMAN恢复管理器
【Oracle】玩转Oracle数据库(七):RMAN恢复管理器
315 5
|
安全 机器人 程序员
Windows 计划任务每天隔 3 小时运行一次批处理文件详细配置步骤
Windows 计划任务每天隔 3 小时运行一次批处理文件详细配置步骤
1749 2
|
关系型数据库 MySQL API
MySQL上亿数据查询优化:实践与技巧
MySQL亿级数据查询优化涉及索引设计、分区表、查询语句优化和数据库架构调整。例如,通过为常用查询列创建索引、使用EXPLAIN分析查询计划、避免全表扫描和SELECT *,以及采用垂直拆分、水平拆分和读写分离来提升性能。分区表能减少查询数据量,API接口测试可验证优化效果。
764 0
|
存储 关系型数据库 MySQL
MySQL分区表:万字详解与实践指南
MySQL分区表:万字详解与实践指南
|
关系型数据库 MySQL Java
9. 成功解决:Driver class 'org.gjt.mm.mysql.Driver' could not be found
在使用 Kettle(Spoon) 工具创建 MySQL 数据库连接时,提示:Driver class 'org.gjt.mm.mysql.Driver' could not be found, make sure the 'MySQL' driver (jar file) is installed. org.gjt.mm.mysql.Driver
3943 0
|
Oracle 关系型数据库 Linux
|
供应链 监控 算法
供应商全息画像的建立和应用
大型央企和集团企业作为供应链的核心企业,每年都要进行大量工程项目建设及大宗物资采购,伴随着招标采购规模大幅度增加的往往也是庞大的供应商群体。
供应商全息画像的建立和应用
|
存储 数据采集 文件存储
|
并行计算 Ubuntu Linux
Ubuntu18.04安装tensorflow-gpu1.15.0配置环境
Ubuntu18.04安装tensorflow-gpu1.15.0配置环境
1736 0
Ubuntu18.04安装tensorflow-gpu1.15.0配置环境

热门文章

最新文章