Dataphin功能Tips系列(93)如何基于任务标签实现跨项目批量运维

简介: Dataphin推出租户级统一运维能力,支持预定义50个标签,可按来源系统、业务场景等批量打标任务;运维时无需切换项目或发布,即可跨项目一键重跑、补数据、改调度类型,大幅提升应急响应效率,保障业务连续性。

👉🏻场景

在构建企业级数据中台的过程中,源自同一业务系统的数据处理链路,往往因不同的业务场景、用途或团队职责,被拆分至多个 Dataphin 项目中,涉及数十乃至上百个任务节点。一旦发生紧急情况(如上游系统故障),运维人员若需手动逐个项目查找相关任务进行干预,不仅效率低下、耗时费力,还极易因遗漏关键节点而导致下游数据产出中断,严重影响业务连续性。

👉🏻 解决方案及功能

Dataphin提供租户级统一运维能力,通过任务打标以及免发布流程的批量操作,显著提升应急响应效率。

  1. 在「管理中心」-「系统设置」-「研发平台」设置中,可以预定义最多50个标签。

  2. 在数据开发阶段,我们可以按照来源系统、业务场景、用途等维度为任务添加标签。

    也可以在任务列表中批量添加标签,例如,我们可以为来源自CRM系统的集成任务批量打标。

  3. 任务上线后,在「运维」模块可对整个租户内的任务或实例进行筛选,并一键执行重跑、补数据、修改调度类型等批量操作,无需切换项目或走发布流程

    例如,若CRM系统突发故障,为防止阻断下游节点运行,我们可以快速筛选出相关任务,将调度类型修改为空跑,避免跑批时整条链路中断。

相关文章
|
2月前
|
Kubernetes 调度 流计算
Flink on Kubernetes 自定义镜像能力:让企业存量实时任务零成本迁移,实现统一平台管控
Dataphin推出Flink on Kubernetes自定义镜像能力,支持企业直接复用存量业务镜像与K8s配置,零代码改造、零环境风险完成实时任务迁移,实现“业务不动、管控升级”,兼顾稳定性与平台化治理。
129 0
|
4月前
|
人工智能 前端开发 API
X-应用创作:您专属的全栈工程师,根据需求直接生成可上线的应用
Dataphin在V5.5推出“X-应用创作”,利用大模型丰富的全栈开发能力,结合系统内部的数据服务API,面向多元应用场景,快速构建高效且美观的微应用。
192 4
|
5月前
|
SQL 自然语言处理 BI
Dataphin功能Tips系列(87)Dataphin「X-分析」:自然语言开启自助取数新时代
Dataphin推出【X-分析】Agent,支持非技术用户通过自然语言提问,自动生成SQL并执行查询,快速获取数据结果。用户可新建分析专辑,结合业务数据与提示词优化模型理解,实现精准取数。支持SQL审核编辑、保存至Notebook或一键创建Quick BI数据集,打通从查询到分析的全流程,降低人力成本,提升数据消费效率,助力业务自助高效用数。
213 0
Dataphin功能Tips系列(87)Dataphin「X-分析」:自然语言开启自助取数新时代
|
5月前
|
存储 分布式计算 Hadoop
Dataphin功能Tips系列(86)Dataphin“查询加速”方案:提升大表分析性能,节省存储保障数据一致性
Dataphin推出“查询加速”功能,无需数据同步,通过一键映射外部Catalog,实现对MaxCompute/Hadoop大表的透明加速。利用StarRocks等引擎秒级响应即席查询,保障权限统一与数据安全,降低存储成本与运维压力。
177 0
|
5月前
|
数据采集 人工智能 运维
Dataphin功能Tips系列(85)告别“人肉排障”:AI驱动数据质量根因诊断,让治理效率跃升
传统数据治理中,数据质量问题依赖人工排查,效率低且难定位根因。Dataphin 5.4推出X-数据质量根因诊断功能,基于AI大模型分析数据血缘与采样,智能定位问题源头,自动生成整改建议与影响评估,实现从发现问题到闭环治理的自动化,大幅提升治理效率与准确性。
272 0
|
2月前
|
数据可视化 定位技术
Dataphin功能Tips系列(96)Dataphin 构建外部数据系统血缘统一管理解决方案(2)
Dataphin通过OpenAPI支持外部系统血缘纳管,可基于Catalog/Schema/Env等属性组合注册表级与字段级血缘,补全全链路数据地图,实现跨系统血缘可视化与影响分析。
146 1
|
2月前
Dataphin登录系统重磅升级:界面化SSO配置、多账号登录功能上线
Dataphin V6.0推出界面化SSO配置与多账号体系登录功能,支持CAS、OAuth2.0、SAML、飞书等多种协议,解决旧版配置复杂、不支持多源登录等痛点,提升企业单点登录体验与管理效率。
207 0
|
9月前
|
搜索推荐 数据管理
Dataphin功能Tips系列(70)自定义菜单:构建一站式数据管理平台
Dataphin通过自定义菜单功能,支持嵌入企业其他平台URL,实现统一的数据开发与管理平台,提升团队协作效率。
282 8
|
4月前
|
大数据 调度
实时数据入湖消费闭环利器:新增检查节点,破解离线任务依赖校验难题
新增“检查节点”功能,通过精准位点校验与灵活配置,解决实时数据入湖后离线任务依赖判断难题,提升数据链路稳定性与研发效率。
187 3