AI 助理
备案控制台
开发者社区 大数据与机器学习 大数据计算 MaxCompute 正文

从rds同步数据到maxcompute可以用数据过滤做增量同步，那算好的数据再回写rds没有办通过数

从rds同步数据到maxcompute可以用数据过滤做增量同步，那算好的数据再回写rds没有办通过数据过滤来做增量回写吗，第二张图是回写的，没有数据过滤的765问.png 765问问.png

展开
收起
游客3oewgrzrf6o5c 2022-07-03 15:58:38 1578 分享 版权

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

2 条回答
写回答
取消 提交回答
  • 游客bcfx2q4kttgbm

    建议是第一个任务增量写到MaxCompute的时候 mc使用分区表 每次增量都写入一个新分区 ；第二个任务按分区读取 回写。因为mc reader目前只能按分区过滤 （此答案整理自DataWorks交流群(答疑@机器人)）

    2022-07-03 16:42:37
    赞同 展开评论
问答分类：
分布式计算 关系型数据库 MaxCompute RDS 大数据开发治理平台 DataWorks 云原生大数据计算服务 MaxCompute 云数据库 RDS MySQL 版
问答标签：
云原生大数据计算服务 MaxCompute数据 云数据库 RDS MySQL 版数据 云数据库 RDS数据 云数据库 RDS MySQL 版同步 云数据库 RDS同步
问答地址：
开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 问答
相关问答
MaxCompute
DataWorks为什么mysql删除数据也会在odps增量同步？
144
1
0
如何实现对存储在MySQL或RDS中的原始数据的ODS层增量更新？
137
2
0
可以用odps script节点用B表的数据来增量更新到A表吗？
65
0
0
dataworks中odps 离线任务，增量读ES数据的where条件要怎么写，有文档吗？
82
1
0
大数据计算MaxCompute 存量和增量数据应该怎么设计啊？
69
1
0
DataWorks要从Maxcompute去调度这个rds上的PROCEDURE让它定时执行怎么办？
106
1
0
DataWorks中maxcompute 可以调度rds上的函数吗？
98
1
0
大数据计算MaxCompute中rds的tinyint用string接收不报错了怎么办？
96
0
0
大数据计算MaxCompute外表可以删除重建吗，对rds有影响吗？
76
1
0
大数据计算MaxCompute查询rds外部表 报这个错是什么原因呢？
100
1
0
大数据与机器学习

大数据计算 MaxCompute

MaxCompute（原ODPS）是一项面向分析的大数据计算服务，它以Serverless架构提供快速、全托管的在线数据仓库服务，消除传统数据平台在资源扩展性和弹性方面的限制，最小化用户运维投入，使您经济并高效的分析处理海量数据。

我要提问
收录在圈子:
DataWorks
2706
+ 订阅

相关文章

  • SpringBoot集成powerJob实战派
  • 3.分页
  • SpringBoot集成Sharding-Jdbc分库分表
  • Mysql基础学习day02
  • MySqlday2

    • 热门讨论

    热门文章

  • 阿里云和腾讯云服务器哪个好！
  • ODPS 的下一个15年，大数据将迎来春天还是寒冬？
  • 阿里云一个CU对应多少cpu和内存?
  • 数据采集中数据源共包含哪些？
  • Maxcompute算是属于关系型数据库还是非关系型数据库？
  • 请问怎么查看大数据计算MaxCompute的版本?
  • DataWorks中DBeaver查询MaxCompute，默认是UTC时区，这个要怎么修改呢？
  • 大数据计算MaxCompute跨主账号的两个数据库，怎么授权 另一主账户 跨库查询啊？
  • 咨询一下，我们需要查询odps项目空间的每一张表存储量情况，分区情况等，有没有相应的命令或者SQL？
  • 大数据计算MaxCompute odpssql能不能将[1,2,3,4]这样的字符串转成array？
    • 展开全部
  • odps是什么?
  • 阿里数据仓库实践分享
  • PyODPS DataFrame 处理笛卡尔积的几种方式
  • 基于阿里云数加MaxCompute的企业大数据仓库架构建设思路
  • MaxCompute（原ODPS）开发入门指南——数据上云篇
  • MaxCompute 2.0 生态开放之路及最新发展
  • 【大数据开发套件调度配置实践】——不同周期任务依赖配置
  • 【8.23更新--技术干货全家桶】大数据计算技术共享计划 — MaxCompute技术公开课第二季
  • 双管齐下，MaxCompute数据上云与生态
  • MaxCompute/DataWorks 数据集成与开发实践
    • 展开全部
    还有其他疑问?
    咨询AI助理