AI 助理
备案控制台
开发者社区 云知 文章 正文

DataWorks数据质量版本更新

2018-06-04 1769
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
大数据开发治理平台DataWorks，Serverless资源组抵扣包300CU*H
简介：
信息摘要： 数据质量新增2种实时数据源校验规则，离线校验新增9个规则模板
适用客户： 数据开发者
版本/规格功能： 数据质量新增实时数据源（datahub）校验；新增9个离线模板规则的校验；增加数据质量与调度系统关联方式，提升与调度关联的灵活性；数据质量离线数据源新增DataWorks项目自动同步；修复数据质量告警邮件及短信无法收到的bug。
产品文档： https://help.aliyun.com/document_detail/66868.html?spm=a2c4g.11174283.6.682.nhtUjv
文章标签：
大数据开发治理平台 DataWorks
Web App开发
数据采集
DataWorks
关键词：
大数据开发治理平台 DataWorks数据质量
相关实践学习
基于MaxCompute的热门话题分析
本实验围绕社交用户发布的文章做了详尽的分析，通过分析能得到用户群体年龄分布，性别分布，地理位置分布，以及热门话题的热度。
一站式大数据开发治理平台DataWorks初级课程
DataWorks 从 2009 年开始，十ー年里一直支持阿里巴巴集团内部数据中台的建设，2019 年双 11 稳定支撑每日千万级的任务调度。每天阿里巴巴内部有数万名数据和算法工程师正在使用DataWorks，承了阿里巴巴 99%的据业务构建。本课程主要介绍了阿里巴巴大数据技术发展历程与 DataWorks 几大模块的基本能力。 课程目标  通过讲师的详细讲解与实际演示，学员可以一边学习一边进行实际操作，可以深入了解DataWorks各大模块的使用方式和具体功能，让学员对DataWorks数据集成、开发、分析、运维、安全、治理等方面有深刻的了解，加深对阿里云大数据产品体系的理解与认识。 适合人群  企业数据仓库开发人员  大数据平台开发人员  数据分析师  大数据运维人员  对于大数据平台、数据中台产品感兴趣的开发者
正毅
目录
相关文章
带你读小助手
|
数据采集 SQL 分布式计算
11.DataWorks 数据质量|学习笔记
快速学习11.DataWorks 数据质量
带你读小助手
618 0
11.DataWorks 数据质量|学习笔记
DataWorks@佳里
|
7天前
|
数据采集 存储 DataWorks
DataWorks Copilot：让你的数据质量覆盖率一键飞升！
在数据加工链路中，如何确保高质量的数据产出是一个一直需要重点解决的问题。阿里云DataWorks的数据质量规则模板可以帮助用户建设数据质量，在离线表上定义相关的规则。为优化手动配置规则的工作量，DataWorks的智能助手 DataWorks Copilot 推出了数据质量规则推荐功能，您可以使用这一功能，一键提升数据质量覆盖度。
DataWorks@佳里
52 20
DataWorks Copilot：让你的数据质量覆盖率一键飞升！
dataworks_demo21
|
数据采集 SQL 存储
DataWorks数据质量介绍及实践 | 《一站式大数据开发治理DataWorks使用宝典》
数据质量问题虽然从数据工程师的角度来看是个简单问题，但是从业务的角度来看是个很严重的问题。所以数据质量是数据开发和治理全生命周期中，非常重要的一个环节。在DataWorks产品版图里，数据质量也是非常重要的模块之一。
dataworks_demo21
4481 0
DataWorks数据质量介绍及实践 | 《一站式大数据开发治理DataWorks使用宝典》
番茄酱脑袋
|
5月前
|
数据采集 存储 DataWorks
DataWorks产品使用合集之如何查看数据质量中心（DQC）的规则执行记录
DataWorks作为一站式的数据开发与治理平台，提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案，帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述，涵盖数据处理的各个环节。
番茄酱脑袋
85 3
真的很搞笑
|
7月前
|
数据采集 DataWorks 关系型数据库
DataWorks产品使用合集之是否有数据质量检查功能
DataWorks作为一站式的数据开发与治理平台，提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案，帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述，涵盖数据处理的各个环节。
真的很搞笑
63 0
小Lee
|
4月前
|
数据采集 DataWorks 监控
dataworks数据质量
dataworks数据质量
小Lee
192 1
番茄酱脑袋
|
5月前
|
数据采集 SQL DataWorks
DataWorks产品使用合集之如何配置数据质量监控
DataWorks作为一站式的数据开发与治理平台，提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案，帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述，涵盖数据处理的各个环节。
番茄酱脑袋
87 0
冲冲冲c
|
7月前
|
数据采集 DataWorks 监控
DataWorks产品使用合集之如何配置周期任务（如工作流任务或调度任务）依赖于数据质量规则校验结果
DataWorks作为一站式的数据开发与治理平台，提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案，帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述，涵盖数据处理的各个环节。
冲冲冲c
106 0
冲冲冲c
|
7月前
|
数据采集 DataWorks 监控
DataWorks产品使用合集之数据质量检测出现校验异常一般是什么造成的
DataWorks作为一站式的数据开发与治理平台，提供了从数据采集、清洗、开发、调度、服务化、质量监控到安全管理的全套解决方案，帮助企业构建高效、规范、安全的大数据处理体系。以下是对DataWorks产品使用合集的概述，涵盖数据处理的各个环节。
冲冲冲c
40 0
嘟嘟嘟嘟嘟嘟
|
7月前
|
数据采集 DataWorks 数据挖掘
DataWorks操作报错合集之出现报错数据质量校验不通过，但任务没有设置DQC校验，是什么导致的
DataWorks是阿里云提供的一站式大数据开发与治理平台，支持数据集成、数据开发、数据服务、数据质量管理、数据安全管理等全流程数据处理。在使用DataWorks过程中，可能会遇到各种操作报错。以下是一些常见的报错情况及其可能的原因和解决方法。
嘟嘟嘟嘟嘟嘟
156 0

云知

热门文章

最新文章

  • 1
    活动实践 | DataWorks智能交互式数据开发与分析之旅
  • 2
    DataWorks年度发布：智能化湖仓一体数据开发与治理平台的演进
  • 3
    🚀DataWorks 深度实践与评测：数据治理新时代的全景体验。
  • 4
    DataWorks产品评测：大数据开发治理的深度体验
  • 5
    DataWorks产品体验评测
  • 6
    DataWorks 稳定性保障全解析：深入监控与资源调配
  • 7
    DataWorks深度技术解读：构建开放的云原生数据开发平台
  • 8
    DataWorks任务如何现在执行最长时间？
  • 9
    DataWorks数据集成同步至Hologres能力介绍
  • 10
    如何让DataWorks调度依赖一个非DataWorks的任务结点，如数据上传任务？
  • 1
    利用 DataWorks 数据推送定期推播 Postgres Query 诊断信息
    87
  • 2
    MaxCompute操作报错合集之用户已在DataWorks项目中，并有项目的开发和运维权限，下载数据时遇到报错，该如何解决
    100
  • 3
    MaxCompute产品使用合集之如何在DataWorks中实现离线同步多个分表到MC的多级分区表
    70
  • 4
    MaxCompute产品使用合集之如何在DataWorks中引用MC资源
    77
  • 5
    MaxCompute产品使用合集之DataWorks中如何根据MC数据源做成api
    43
  • 6
    MaxCompute产品使用合集之在DataWorks中，当涉及到MC的投递功能时，所指的自定义RAM角色是什么
    58
  • 7
    MaxCompute产品使用合集之如何在DataWorks中设置MC的自定义参数以指定季度初和周初
    71
  • 8
    MaxCompute产品使用合集之在阿里云DataWorks中，如何关闭跨空间查询表功能
    126
  • 9
    MaxCompute产品使用合集之数据总线同步到DataWorks的任务状态持续显示为HANG（挂起）且同步延迟不断增加，该如何排查
    96
  • 10
    利用 DataWorks 数据推送定期推播 MySQL 或 StarRocks Query 诊断信息
    137

    • 相关课程

    更多
  • 一站式大数据开发治理平台DataWorks初级课程
  • DataWorks一站式大数据开发治理平台精品课程
  • 场景实践 - 使用MaxCompute进行数据质量核查
  • 阿里云 DTS是如何做实时数据集成的？
  • MaxCompute行业应用及调优
  • 基于阿里云MaxCompute搭建数据仓库（离线）

    • 相关电子书

    更多
  • DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季
  • DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季
  • 基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季

    • 相关实验场景

    更多
  • DataWorks智能交互式数据开发与分析之旅
  • 基于Hologres+Flink搭建GitHub实时数据大屏
  • 基于Hologres轻松玩转一站式实时仓库
  • 基于DTS构建一站式实时数据服务
  • 数据上云实验：基于星轨工具的dataphin批量数据上云
  • Dataphin数据研发
    • 下一篇
    DataWorks售前咨询