数据归档到OSS的任务执行速度可以调整么?之前配置的任务归档执行起来速度很慢,2天才归档了9E数据,

数据归档到OSS的任务执行速度可以调整么?之前配置的任务归档执行起来速度很慢,2天才归档了9E数据,我们总共有40E数据,每日新增量近1000w数据,这块有什么提速的办法,而且归档过程中对数据库性能有一定的影响,造成数据库查询变慢,经常超时

展开
收起
真的很搞笑 2023-04-17 18:12:48 216 发布于浙江 分享
分享
版权
举报
3 条回答
写回答
取消 提交回答
  • 不好意思 数据归档目前不能调整执行速度,此回答整理自钉群“阿里云DMS数据管理用户交流群”

    2023-04-19 08:03:50 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
  • 大鹏一日同风起,扶摇直上九万里

    你好,无法单独调整任务速度。

    建议: 1,优化任务调度,比如去掉 后置行为,数据校验等 2,设置任务归档配置,比如只归档部分核心表 3,可以分拆多个任务,并发执行调度 4,建议使用只读库做归档,减少生产库压力

    2023-04-17 18:49:49 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    您好,阿里云数据管理DMS数据归档到OSS的任务执行速度可以通过调整任务并发数来进行优化。

    在数据归档任务的配置中,您可以设置任务并发数,即同时执行归档任务的线程数。通过增加任务并发数,可以提高任务执行的速度。但是需要注意的是,并发数过大可能会对源数据库和目标OSS存储产生较大的压力,因此需要根据实际情况进行调整。

    此外,您还可以通过优化归档任务的数据过滤条件、调整OSS存储的读写速度等方式来提高任务执行速度。

    2023-04-17 18:18:53 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论

数据库领域前沿技术分享与交流

收录在圈子:
+ 订阅
让用户数据永远在线,让数据无缝的自由流动
还有其他疑问?
咨询AI助理
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等