Kettle使用接口获取数据(九)

简介: Kettle使用接口获取数据(九)

http client20190510150513906.png

填写地址

接口地址:http://api.map.baidu.com/place/v2/suggestion?query=%E6%98%A5%E7%86%99%E8%B7%AF®ion=%E6%88%90%E9%83%BD%E5%B8%82&output=json&ak=n0lHarpY3QZx6xXXIaWMFLxj


20190510150551329.png

http client

20190510150711774.png

获取到的json数据

20190510150842846.png

json input解析json数据

2020112618535688.png

20190510150751206.png

可以用字段选择来获取自己想要的数据,然后存入表中

20190510150952506.png


使用定时任务来运行工程

kettle有自带的定时任务,但是需要一直开启kettle对系统的性能造成影响,建议不要使用这个功能

20190510151119319.png

可以使用windows自带的定义任务来完成,首先写一个bat脚本

d:
cd D:\software\kettle7.1\data-integration
Kitchen /file=D:/Repository/KettleRep/web/http.kjb >D:/kettle.log

20190510152106348.png

然后使用系统自带的定时任务来执行

20190510151254830 (1).png

有一个地方需要注意下,要勾选一个不管用户是否登陆都可以执行。

REST Client

20190510151512841.png

填写参数

image.png

rest client

20190510151634518.png

json数据

20190510151854733.png

20190510151913756.png

相关文章
|
6月前
|
数据库连接 数据库
kettle开发篇-流查询
kettle开发篇-流查询
165 0
|
6月前
|
数据库
kettle开发篇-记录集连接
kettle开发篇-记录集连接
156 0
|
6月前
|
数据库连接 数据库
kettle开发篇-数据库查询
kettle开发篇-数据库查询
135 0
quickBI上传文件数据源中的替换文件后端逻辑是怎么实现的
quickBI上传后的所有文件 都会追加到物理表中,那么替换其中一个文件,怎么找到物理表里此原文件对应的数据呢,物理表里是需要建一个关联字段吗
|
1月前
|
Java
ETL工具 Kettle 中 kettle循环传递变量_(最简单的方法)
本文详细介绍了如何在Kettle工具中使用循环传递变量,通过示例展示了如何将movies表数据按月插入到ods_movies表,涉及新建转换、获取变量、作业配置和执行,呈现了一个嵌套作业结构.
90 3
|
6月前
|
JSON Java API
教你如何使用API接口获取数据
随着互联网技术的发展和应用的普及,越来越多的系统和应用提供API接口供其他系统和应用进行数据交互。通过API接口,我们可以获取到各种各样的数据,例如天气预报、股票行情、新闻摘要等等。本文将介绍如何使用API接口获取数据,并附有示例代码。
|
5月前
|
分布式计算 DataWorks 关系型数据库
DataWorks操作报错合集之数据源同步时,使用脚本模式采集mysql数据到odps中,使用querySql方式采集数据,在脚本中删除了Reader中的column,但是datax还是报错OriginalConfPretreatmentUtil - 您的配置有误。如何解决
DataWorks是阿里云提供的一站式大数据开发与治理平台,支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中,可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
|
6月前
|
SQL 关系型数据库 API
从API获取数据并将其插入到PostgreSQL数据库:步骤解析
使用Python处理从API获取的数据并插入到PostgreSQL数据库:安装`psycopg2`,建立数据库连接,确保DataFrame与表结构匹配,然后使用`to_sql`方法将数据插入到已存在的表中。注意数据准备、权限设置、性能优化和安全处理。
|
6月前
|
XML JSON API
教你如何使用API接口获取数据!
使用API接口获取数据的过程通常涉及到几个步骤,包括了解API、注册获取API密钥、编写代码调用API并处理返回的数据。下面是一个详细的教程。
|
Java 开发工具 Maven
<4>搭建SpringcloudConfig中的configClient端,从configServer端获取数据
configServer端在上一篇博客已经搭好,搭建configServer