DataWorks从下午开始,实时同步延时超级严重,大家有这个问题吗?
可以按以下步骤排查问题:
首先检查DataWorks服务是否正常。登录控制台,查看SERVICE ADMIN - 服务管理是否存在异常。
检查被集成数据源(如数据库)是否存在性能下降。可以查看对应的监控数据。
登录DataWorks控制台,查看实时同步作业的监控数据。看CPU利用率、内存占用是否超高。
查看作业运行日志,是否有任何异常警告。提供给DataWorks技术支持人员分析。
根据实时同步作业延迟的表观现象:
如果只有特定少数表延迟严重,很大可能是这些表数据量超大导致。
如果绝大部分表都存在同步延迟,则需考虑DataWorks后端conda。
更新实时同步作业的配置。比如增加分批同步任务数量,扩大并发度。
尝试暂停其他实时同步作业,看此作业是否能立即恢复。如果能,则表明CPU资源紧张。
提供尽可能多的数据供分析,包括:
数据源类型
存在延迟的表名称
作业ID和名称
同步时间段
作业运行日志
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。
DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。