老师,我有3个问题需要您帮忙解答一下 1.一个同步场景,polardb一个表大概约15亿,如果每天全量同步,都不知道同步到什么时候了,这种有什么好建议吗? 2.任务失败了,可设置自动重跑,直到跑成功为止么 3.可不可以设置每天都自动补前N天数据,而不是手动补
1)一般是建议增量同步的,您这边什么场景是需要每天全量同步呢;同步速度和资源组大小正相关 一般并发越大 速度相对会快 2)自动重跑是按设置的次数来的,可以设置监控 比如重跑3次还不成功 及时告警 自定义规则功能 3)同步读取的数据按过滤条件来 过滤出哪些就同步哪些 如果设置的是全量同步 就不存在补N天前数据的说法了(此答案整理自DataWorks交流群(答疑@机器人))
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。