备案控制台
开发者社区 数据库 文章 正文

基于变量方式实现kettle快速循环迁移表数据（八）

2022-12-10 303
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： 基于变量方式实现kettle快速循环迁移表数据（八）

功能

功能：从blog数据库中同步数据到blog2里面

blog库里面有四张表拥有数据的，blog2中没有表

创建一个作业，从菜单栏拉取这些

20190510143138394.png

获取源库中表信息

创建一个转换，用来获取源库中的表信息

20190510143441406.png

数据迁移到目标库

数据库迁移的作业创建如下

20190510143519164.png

从结果中获取变量

把结果变成变量的转换

20190510143641308.png

设置变量，点击获取字段就可以了

创建表

同步数据，主要就是把传来的表名，创建表格语句遍历执行

20190510143752560.png

执行sql语句

20190510143839721.png

表输入

2019051014394616.png


此处的TABLE_NAME为设置变量里面传过来的，需要勾选替换SQL里面的变量

表输出

20190510144028344.png

需要注意的地方是需要勾选这里，不然不会遍历

20190510144056642.png

实现全表迁移，这边是mysql到mysql，还可以到不同的数据库类型，如oracle等

20190510144354895.png

文章标签：
SQL
关系型数据库
MySQL
Oracle
数据库
pffkzc2qcmn6c
目录
相关文章
三分钟热度的鱼
|
18天前
|
SQL 监控 数据处理
实时计算 Flink版产品使用问题之加了一个条件，初次同步的时候，会先把所有符合条件的数据读出来吗
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架，广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器，提供了一套全面的解决方案，以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点，使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
三分钟热度的鱼
29 2
真的很搞笑
|
6天前
|
关系型数据库 MySQL 分布式数据库
PolarDB操作报错合集之在进行批量导出数据时，如何过滤掉视图并只导出表
在使用阿里云的PolarDB（包括PolarDB-X）时，用户可能会遇到各种操作报错。下面汇总了一些常见的报错情况及其可能的原因和解决办法：1.安装PolarDB-X报错、2.PolarDB安装后无法连接、3.PolarDB-X 使用rpm安装启动卡顿、4.PolarDB执行UPDATE/INSERT报错、5.DDL操作提示“Lock conflict”、6.数据集成时联通PolarDB报错、7.编译DN报错（RockyLinux）、8.CheckStorage报错（源数据库实例被删除）、9.嵌套事务错误（TDDL-4604）。
真的很搞笑
16 0
三分钟热度的鱼
|
19天前
|
消息中间件 关系型数据库 MySQL
实时计算 Flink版产品使用问题之任务在同步过程中新增同步表后选择全量初始化历史数据，是否会阻塞原先其余表的增量同步
实时计算Flink版作为一种强大的流处理和批处理统一的计算框架，广泛应用于各种需要实时数据处理和分析的场景。实时计算Flink版通常结合SQL接口、DataStream API、以及与上下游数据源和存储系统的丰富连接器，提供了一套全面的解决方案，以应对各种实时计算需求。其低延迟、高吞吐、容错性强的特点，使其成为众多企业和组织实时数据处理首选的技术平台。以下是实时计算Flink版的一些典型使用合集。
三分钟热度的鱼
26 5
实时计算 Flink版产品使用问题之任务在同步过程中新增同步表后选择全量初始化历史数据，是否会阻塞原先其余表的增量同步
花开富贵111
|
11天前
|
SQL 分布式计算 大数据
MaxCompute产品使用问题之已经执行了整库同步操作，想要进行逆向操作，该怎么操作
MaxCompute作为一款全面的大数据处理平台，广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践，可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集，涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
花开富贵111
27 6
萝卜丝丸子
|
11天前
|
SQL 分布式计算 大数据
MaxCompute操作报错合集之如何实现查询不存在分区的表时能够报错
MaxCompute是阿里云提供的大规模离线数据处理服务，用于大数据分析、挖掘和报表生成等场景。在使用MaxCompute进行数据处理时，可能会遇到各种操作报错。以下是一些常见的MaxCompute操作报错及其可能的原因与解决措施的合集。
萝卜丝丸子
21 5
真的很搞笑
|
2月前
|
JavaScript 关系型数据库 Serverless
函数计算常见问题之导入数据报错如何解决
函数计算（Function Compute, FC）是阿里云提供的无服务器计算服务，它允许用户在无需管理服务器的情况下运行代码，但在配置和执行过程中可能遇到报错，本合集致力于梳理FC服务中的常见报错和配置问题，并提供解决方案，帮助用户优化函数执行环境。
真的很搞笑
155 0
花开富贵111
|
11天前
|
SQL 分布式计算 DataWorks
MaxCompute产品使用问题之如何通过临时查询功能来书写和运行SQL语句
MaxCompute作为一款全面的大数据处理平台，广泛应用于各类大数据分析、数据挖掘、BI及机器学习场景。掌握其核心功能、熟练操作流程、遵循最佳实践，可以帮助用户高效、安全地管理和利用海量数据。以下是一个关于MaxCompute产品使用的合集，涵盖了其核心功能、应用场景、操作流程以及最佳实践等内容。
花开富贵111
23 0
三分钟热度的鱼
|
2月前
|
SQL 分布式计算 Java
MaxCompute异常问题之插入语法异常如何解决
MaxCompute异常涉及到在使用阿里云MaxCompute大数据计算服务时遇到的各种错误和问题；本合集将提供针对MaxCompute异常的分析和解决方案，帮助用户处理数据处理、分析任务中的异常情况。
三分钟热度的鱼
52 1
vohelon
|
2月前
|
分布式计算 资源调度 运维
在MaxCompute中，若想查看表的小文件合并时间
在MaxCompute中，若想查看表的小文件合并时间
vohelon
48 1
存在morning
|
SQL 关系型数据库 MySQL
【解决方案 二十四】如何对MySQL数据表批量执行操作
【解决方案 二十四】如何对MySQL数据表批量执行操作
存在morning
140 0

热门文章

最新文章

  • 1
    Docker的Windows容器初体验
  • 2
    启动报错“No bootable device”
  • 3
    使用TDengine国产时序数据库存储能耗数据并通过钉钉机器人接收报警信息
  • 4
    解决跨域问题 Response to preflight request doesn't pass access control check
  • 5
    [机器学习] 1、《机器学习系统设计》学后总结
  • 6
    如何设计一个消息队列？
  • 7
    semaphore
  • 8
    Net设计模式实例之外观模式（Façade Pattern）(2)
  • 9
    《认知设计：提升学习体验的艺术》——学习者应该达到何种熟练程度
  • 10
    QuartZ Cron表达式在java定时框架中的应用
  • 1
    Flask实现内部接口----pycharm安装及新建，location代表着文件路径，下面是Python的环境，Flask是由Python开发的框架，Python文件接口ython通过GET发送
    28
  • 2
    文本，文字识别，PaddleOCR，如何删除，PaddleOCR详解，检测，方向分类器，识别，检测的意思是检查字符的位置，查像素坐标，方向分类器，能够实现180度的图像，字符识别是把识别字符
    17
  • 3
    基于SpringBoot+Vue的短视频广告发布系统的详细设计和实现(源码+lw+部署文档+讲解等)
    19
  • 4
    python -m pip ，SyntaxError: invalid syntax，下载需要pip的包
    19
  • 5
    Python安装pip
    23
  • 6
    文本，文字识别02----PaddleOCR基础概念及介绍，安装和使用，人工智能是一种使计算机模仿人类的一种技术，PaddleOCR的安装地址-https://www.paddlepaddle.org
    17
  • 7
    文本，文字扫描01，OCR文本识别技术展示，一个安卓App，一个简单的设计，文字识别可以应用于人工智能，机器学习，车牌识别，身份证识别，银行卡识别，PaddleOCR+SpringBoot+Andr
    17
  • 8
    基于SpringBoot+Vue的白优校园社团网站的详细设计和实现(源码+lw+部署文档+讲解等)
    17
  • 9
    Annotations are not allowed here，@PostMapper路径，不加；
    12
  • 10
    文本，wangEditor5教程-上传图片，在开发文档的菜单配置当中，去搜索里搜索图片，也可以找到，上传图片必须有服务端的图片，验证接口正确用postman，wangEditor的postman接口
    15

    • 相关课程

    更多
  • StarRocks 数据导入、建表查询以及manger管理

    • 相关电子书

    更多
  • Phoenix 全局索引原理与实践
  • 大批量处理excel文件到ODPS中方案
  • HBase2.0重新定义小对象实时存取
    • 下一篇
    部署LAMP环境（Alibaba Cloud Linux 3）