《全链路数据治理-智能数据建模 》——大白话数据建模(6)

简介: 《全链路数据治理-智能数据建模 》——大白话数据建模(6)

《全链路数据治理-智能数据建模 》——大白话数据建模(5) https://developer.aliyun.com/article/1231143?groupCode=tech_library



3) 数仓建设


image.png


image.png


image.png


image.png


image.png



4) 模型发布


image.png

image.png


image.png



3. 数据开发

在需求分析和模型设计做的很充分的情况下,数据开发反而是最为简单的,DataWorks 数据建模甚至可以直接生成数据开发的简单代码,供数据开发直接使用。


所以虽然在数据建模中投入一定的工作时间,但是整体数据开发的效率是更高的。在数据开发完成后,通过相关数据工具进行回归验证。


4. 数据运维


通过DataWorks 其他模块,观察数据线上产出的质量、时效;观察数据使用情况,及时对耗时长、使用率低的数据进行治理。



四、 总结

以往大数据研发经历了一段野蛮增长的时光,产生了大量不可维护或者计算存储成本高的数据,给企业造成了很大的负担。现在大数据产品关于建模的能力正在日益变完善,后续的大数据研发过程应该都是围绕着建模展开了,也欢迎大家使用DataWorks 提供的数据建模工具,改善、规范你的数据研发流程。


image.png




相关文章
|
SQL druid 搜索推荐
最强最全面的数仓建设规范指南 (一)
本文将全面讲解数仓建设规范,从数据模型规范,到数仓公共规范,数仓各层规范,最后到数仓命名规范,包括表命名,指标字段命名规范等!
14350 2
|
存储 分布式计算 运维
【2023云栖】刘一鸣:Data+AI时代大数据平台建设的思考与发布
本文根据2023云栖大会演讲实录整理而成,演讲信息如下: 演讲人:刘一鸣 | 阿里云自研大数据产品负责人 演讲主题:Data+AI时代大数据平台应该如何建设
103260 16
|
监控 大数据 API
可以调度kettle的工具有哪些?都有什么特点?如何选择?
【10月更文挑战第25天】可以调度kettle的工具有哪些?都有什么特点?如何选择?
969 5
|
数据库
数仓建设:数据域和主题域是什么关系?
数仓建设:数据域和主题域是什么关系?
10430 2
数仓建设:数据域和主题域是什么关系?
|
DataWorks 数据建模 数据处理
《全链路数据治理-智能数据建模 》——大白话数据建模(1)
《全链路数据治理-智能数据建模 》——大白话数据建模(1)
603 0
|
存储 SQL 关系型数据库
ClickHouse(08)ClickHouse表引擎概况
ClickHouse支持四种主要表引擎系列:MergeTree家族,适用于大数据插入并按主键排序;日志引擎系列,适合小数据量写入,如StripeLog、Log和TinyLog;集成表引擎,如ODBC、JDBC,用于与外部系统集成;特殊引擎,包括分布式、内存、随机数生成等,满足特定需求。MergeTree系列提供数据副本和分区,日志系列不支持索引和突变操作。详细解析见相关文章链接。
504 0
|
存储 SQL 数据采集
《全链路数据治理-智能数据建模 》——大白话数据建模(3)
《全链路数据治理-智能数据建模 》——大白话数据建模(3)
392 0
|
数据建模 BI
《全链路数据治理-智能数据建模 》——大白话数据建模(2)
《全链路数据治理-智能数据建模 》——大白话数据建模(2)
335 0
|
存储 架构师 搜索推荐
《全链路数据治理-智能数据建模 》——数仓建模理论与规范(2)
《全链路数据治理-智能数据建模 》——数仓建模理论与规范(2)
823 0
|
数据建模 BI
《全链路数据治理-智能数据建模 》——数仓建模理论与规范(4)
《全链路数据治理-智能数据建模 》——数仓建模理论与规范(4)
536 0