带你读《全链路数据治理-全域数据集成》之31:5. 任务运维

本文涉及的产品
大数据开发治理平台DataWorks,Serverless资源组抵扣包300CU*H
简介: 带你读《全链路数据治理-全域数据集成》之31:5. 任务运维

5. 任务运维

1) 查看任务状态

可以看到任务已经处于运行中状态,点击执行概况,可以进入任务运维页面。

image.png

查看结构迁移状态。

image.png

结构迁移表格数据说明:

l 目标对接方式:自动建表使用已有表。

l DDL 列:鼠标悬浮可以查看建表的 SQL 语句。

l 状态列值:执行中、成功、失败,如状态为失败,鼠标悬浮可查看失败原因。


查看全量初始化状态。

image.png


全量初始化表格数据说明:

l 全量进度,表示该表的全量初始化任务的执行进度,点击进度可查看同步日

志。

l 已写入数据条数,表示该表全量初始化任务已写入的数据条数。

l 全量启动时间,表示全量初始化任务开始时间。

l 全量完成时间,表示全量初始化任务结束时间。

查看实时同步状态

image.png


实时同步任务指标说明:

l 线程号:线程总数等于并发数,线程号从 0 开始计数,MySQL 读取固定为

单并发执行。

l 总行数:读端已读取/写入的总行数。

注意:一次 UPDATE 操作计数为 2,一条更新前数据,一条更新后数据。

l 总等待时间:如等待时间较大,说明读端存在性能瓶颈。

l 业务延迟:当前实时任务同步延迟秒数。


查看实时任务 FailOver 记录。

image.png

l Failover 事件列,鼠标悬浮可查看 Failover 原因。

l 操作列,点击查看详情,可以查看 Failover 时详细日志。


查看实时任务日志。

image.png

相关文章
|
4月前
|
运维 Prometheus 监控
OceanBase 的运维与监控最佳实践
【8月更文第31天】随着分布式数据库解决方案的需求日益增长,OceanBase 作为一种高性能的分布式数据库系统,在众多场景下得到了广泛应用。为了确保 OceanBase 集群的稳定运行,合理的运维与监控是必不可少的。本文将探讨 OceanBase 的日常运维管理与监控策略,并提供相应的代码示例。
251 2
|
1月前
|
存储 Java 调度
Sppring集成Quartz简单案例详解 包括(添加、停止、恢复、删除任务、获取下次执行时间等)
Sppring集成Quartz简单案例详解 包括(添加、停止、恢复、删除任务、获取下次执行时间等)
31 2
|
2月前
|
jenkins Shell 持续交付
Jenkins持续集成GitLab项目 GitLab提交分支后触发Jenkis任务 持续集成 CI/CD 超级详细 超多图(二)
Jenkins持续集成GitLab项目 GitLab提交分支后触发Jenkis任务 持续集成 CI/CD 超级详细 超多图(二)
81 0
|
3月前
|
人工智能 自然语言处理 机器人
谷歌将大模型集成在实体机器人中,能看、听、说执行57种任务
【9月更文挑战第17天】近年来,人工智能在多模态大模型领域取得显著进展。谷歌最新研发的Mobility VLA系统,将大模型与实体机器人结合,实现了视觉、语言和行动的融合,使机器人能理解并执行复杂多模态指令,如“我应该把这个放回哪里?”系统在真实环境测试中表现出色,但在计算资源、数据需求及伦理问题上仍面临挑战。相关论文发布于https://arxiv.org/abs/2407.07775。
74 9
|
2月前
|
机器学习/深度学习 算法 前端开发
集成学习任务七和八、投票法与bagging学习
集成学习任务七和八、投票法与bagging学习
28 0
|
3月前
|
运维 云栖大会
运维管理新品发布与最佳实践 | 2024云栖大会预告
运维管理新品发布与最佳实践 | 2024云栖大会
|
4月前
|
存储 运维 监控
数据库服务器运维最佳实践
【8月更文挑战第22天】
81 2
数据库服务器运维最佳实践
|
2月前
|
jenkins Shell 持续交付
Jenkins持续集成GitLab项目 GitLab提交分支后触发Jenkis任务 持续集成 CI/CD 超级详细 超多图(一)
Jenkins持续集成GitLab项目 GitLab提交分支后触发Jenkis任务 持续集成 CI/CD 超级详细 超多图(一)
227 0
|
3月前
|
机器学习/深度学习 DataWorks 数据挖掘
基于阿里云Hologres和DataWorks数据集成的方案
基于阿里云Hologres和DataWorks数据集成的方案
80 7
|
3月前
|
消息中间件 Java 数据库连接
Hologres 数据导入与导出的最佳实践
【9月更文第1天】Hologres 是一款高性能的实时数仓服务,旨在提供快速的数据分析能力。无论是从外部数据源导入数据还是将数据导出至其他系统,都需要确保过程既高效又可靠。本文将详细介绍如何有效地导入数据到 Hologres 中,以及如何从 Hologres 导出数据。
130 1

热门文章

最新文章

下一篇
DataWorks