带你读《全链路数据治理-全域数据集成》之31:5. 任务运维

本文涉及的产品
DataWorks Serverless资源组免费试用套餐,300CU*H 3个月
简介: 带你读《全链路数据治理-全域数据集成》之31:5. 任务运维

5. 任务运维

1) 查看任务状态

可以看到任务已经处于运行中状态,点击执行概况,可以进入任务运维页面。

image.png

查看结构迁移状态。

image.png

结构迁移表格数据说明:

l 目标对接方式:自动建表使用已有表。

l DDL 列:鼠标悬浮可以查看建表的 SQL 语句。

l 状态列值:执行中、成功、失败,如状态为失败,鼠标悬浮可查看失败原因。


查看全量初始化状态。

image.png


全量初始化表格数据说明:

l 全量进度,表示该表的全量初始化任务的执行进度,点击进度可查看同步日

志。

l 已写入数据条数,表示该表全量初始化任务已写入的数据条数。

l 全量启动时间,表示全量初始化任务开始时间。

l 全量完成时间,表示全量初始化任务结束时间。

查看实时同步状态

image.png


实时同步任务指标说明:

l 线程号:线程总数等于并发数,线程号从 0 开始计数,MySQL 读取固定为

单并发执行。

l 总行数:读端已读取/写入的总行数。

注意:一次 UPDATE 操作计数为 2,一条更新前数据,一条更新后数据。

l 总等待时间:如等待时间较大,说明读端存在性能瓶颈。

l 业务延迟:当前实时任务同步延迟秒数。


查看实时任务 FailOver 记录。

image.png

l Failover 事件列,鼠标悬浮可查看 Failover 原因。

l 操作列,点击查看详情,可以查看 Failover 时详细日志。


查看实时任务日志。

image.png

相关文章
|
6天前
|
运维 Ubuntu 应用服务中间件
自动化运维:使用Ansible进行配置管理和任务自动化
【9月更文挑战第27天】在现代IT基础设施中,自动化运维是提高效率、减少人为错误和确保系统一致性的关键。本文将介绍如何使用Ansible,一个流行的开源IT自动化工具,来简化日常的运维任务。我们将探索Ansible的核心概念,包括它的架构、如何安装和使用它,以及一些实际的使用案例。无论你是新手还是有经验的运维专家,这篇文章都会提供有价值的见解和技巧,以帮助你更好地利用Ansible实现自动化。
|
10天前
|
运维 监控 Python
自动化运维:使用Python脚本简化日常任务
【9月更文挑战第23天】在本文中,我们将探索如何通过编写Python脚本来自动化常见的系统管理任务,从而提升效率并减少人为错误。文章将介绍基础的Python编程概念、实用的库函数,以及如何将这些知识应用于创建有用的自动化工具。无论你是新手还是有经验的系统管理员,这篇文章都将为你提供有价值的见解和技巧,帮助你在日常工作中实现自动化。
|
9天前
|
运维 监控 Python
自动化运维:使用Python脚本实现日常任务
【9月更文挑战第24天】在现代的软件开发周期中,运维工作扮演着至关重要的角色。本文将介绍如何利用Python编写简单的自动化脚本,来优化和简化日常的运维任务。从备份数据到系统监控,Python的易用性和强大的库支持使其成为自动化运维的首选工具。跟随这篇文章,你将学习如何使用Python编写自己的自动化脚本,提高运维效率,减少人为错误,并最终提升整个开发流程的质量。
|
12天前
|
存储 运维 监控
自动化运维的崛起:如何利用脚本简化日常任务
【9月更文挑战第21天】在快速发展的IT行业中,自动化运维不再是可选项,而是提升效率、减少人为错误的必由之路。本文将深入探讨自动化运维的重要性,并通过一个实际的脚本示例,展示如何将日常重复的运维任务自动化,从而释放运维人员的时间,让他们专注于更有价值的工作。
|
2月前
|
数据采集 DataWorks 监控
DataWorks产品使用合集之数据集成并发数不支持批量修改,该怎么办
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
15天前
|
存储 分布式计算 DataWorks
dataworks数据集成
dataworks数据集成
48 1
|
28天前
|
机器学习/深度学习 DataWorks 数据挖掘
基于阿里云Hologres和DataWorks数据集成的方案
基于阿里云Hologres和DataWorks数据集成的方案
41 7
|
2月前
|
数据采集 DataWorks 监控
DataWorks产品使用合集之数据集成任务日志中显示wait,是什么原因
DataWorks作为一站式的数据开发与治理平台,提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案,帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述,涵盖数据处理的各个环节。
|
2月前
|
SQL 分布式计算 DataWorks
DataWorks操作报错合集之如何解决datax同步任务时报错ODPS-0410042:Invalid signature value
DataWorks是阿里云提供的一站式大数据开发与治理平台,支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中,可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
|
3月前
|
弹性计算 DataWorks 关系型数据库
DataWorks操作报错合集之DataX在执行过程中接收到了意外的信号15,导致进程被终止,该怎么处理
DataWorks是阿里云提供的一站式大数据开发与治理平台,支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中,可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。

热门文章

最新文章

下一篇
无影云桌面