kettle开发篇-参数

简介: kettle开发篇-参数

前言:


昨天我们讲了作业,通过作业我们就能让转换按顺序执行,作业包括作业项、作业跳,通过作业跳来控制作业项是无条件执行,还是当作业项执行结果为True时,怎么执行,为false时怎么执行。今天我们讲下kettle里面的参数。参数是kettle中一个很重要的部分,可以用来传统条件或者过滤条件等。


一、参数


参数对于ETL参数传递是一个很重要的环节,因为参数的传递会涉及到业务数据是如何抽取。 参数分为两种:全局参数和局部参数。

全局参数定义是通过当前用户下.kettle文件夹中的kettle.properties文件来定义。 定义方式是采用键=值对方式来定义,如:startdate=20230101,就说明我们定义了一个startdate的全局参数,对应值为20230101,需要注意的是配置全局变量时需要重启kettle才会生效。  

局部参数 局部参数变量是通过Set Variables与Get Variables方式来设置。 注意:在Set Variables时在当前转换当中不能马上使用,需要在作业中的下一个步骤中使用。

我们引用参数有两种方式:一种是%%变量名%%,一种是${变量名}。 需要注意的是:在SQL中使用变量时需要把“是否替换变量”勾选上,否则无法使变量生效。


二、任务实操


从kettle.properties文件中读取STARTROW和PAGESIZE参数,从t_orders表中获取数据,使用参数传递。

我们的实现过程包括,修改kettle.properties文件,使用变量STARTROW和PAGESIZE的值。 表输入应用STARTROW和PAGESIZE变量,连接文本文件输出或者Excel输出来查看输出结果。 注意我们需要重启后,再执行我们的转换。

对应kettle.properties文件位于.kettle目录下。

引用参数设置

相关文章
|
调度
kettle开发篇-写日志
kettle开发篇-写日志
1001 0
kettle开发篇-空操作
kettle开发篇-空操作
265 0
|
12月前
|
Java
ETL工具 Kettle 中 kettle循环传递变量_(最简单的方法)
本文详细介绍了如何在Kettle工具中使用循环传递变量,通过示例展示了如何将movies表数据按月插入到ods_movies表,涉及新建转换、获取变量、作业配置和执行,呈现了一个嵌套作业结构.
1514 3
|
JavaScript 前端开发 Java
kettle开发篇-作业
kettle开发篇-作业
235 0
|
关系型数据库 MySQL 数据库
n8n自动化工具部署与使用
n8n是一款开源的工作流自动化工具,类似于IFTTT。它的优点是开源、可以自托管、下载安装方便、易于使用,可以互联上百种服务。n8n基于节点能够将任何工具连接在一起,轻松部署不同类型的任务。它可以做很多事情,比如:从数据库中获取数据后下载为excel然后通过邮件发送给其他人。
9648 1
|
JavaScript 前端开发 数据库
Kettle使用脚本实现循环(十)
Kettle使用脚本实现循环(十)
1852 0
Kettle使用脚本实现循环(十)
|
12月前
|
SQL 关系型数据库 MySQL
ETL工具 Kettle 中怎么通过变量传参
ETL工具 Kettle 中怎么通过变量传参
893 0
|
11月前
|
Java
实现java执行kettle并传参数
实现java执行kettle并传参数
178 1
|
11月前
|
IDE Java API
Kettle如何进行二次开发?
【10月更文挑战第24天】Kettle如何进行二次开发?
704 0