带你读《2022技术人的百宝黑皮书》——大淘宝技术数据模型治理阶段性分享(3)

简介: 带你读《2022技术人的百宝黑皮书》——大淘宝技术数据模型治理阶段性分享(3)

带你读《2022技术人的百宝黑皮书》——大淘宝技术数据模型治理阶段性分享(2) https://developer.aliyun.com/article/1247085?groupCode=taobaotech




DataWorks共建


DataWorks是基于MaxCompute/EMR/Hologres等大数据计算引擎,提供专业高效、安全可靠的一站式大数据开发与治理平台。通过与DataWorks团队进行深度共建,利用大淘宝技术多年积累的模型、开发、运维等数据经验提供输入和DataWorks强大的产品研发能力,进行智能建模、开发助手、数据地图等功能的升级,实现数据设计、开发、管控、使用全链路产品化,解决长久以来的数据问题。


image.png


DataWorks智能数据建模


目前,DataWorks智能数据建模产品完成了数仓规划、数据标准、维度建模、数据指标四大产品模块的重大产品功能迭代,具备逆向建模、正向可视化建模、excel建模、代码建模等产品能力,并完成了DataWorks智能数据建模

产品在2021年云栖大会的新功能重磅发布。


DataWorks智能数据建模产品全新发布的核心产品功能主要包含以下内容:


数仓规划


1. 支持公共层及应用层数仓经典分层化域方案所需要素(如数据域、数据集市等)的业务自定义;

2. 支持数仓规范的业务自定义,如各层表名规范定义;

3. 支持建模空间,支持设置建模空间与数据研发空间的关系建立,满足大淘宝技术多业务共享数据规范统筹管理数据模型的需求。


image.png



带你读《2022技术人的百宝黑皮书》——大淘宝技术数据模型治理阶段性分享(4) https://developer.aliyun.com/article/1247081?groupCode=taobaotech

相关实践学习
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库,高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准,可以对海量数据进行即时的多维分析透视和业务探索,快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
相关文章
|
9月前
|
人工智能 自然语言处理 API
蚂蚁开放平台概述
百宝箱开放平台是面向开发者的一站式智能体开发平台,支持API与SDK集成,提供智能体调用、模型效果盲测、WebSDK嵌入等功能,助力快速实现智能对话、内容生成与网页交互,现处于试用阶段,享每月10亿免费token。
709 0
|
11月前
|
Web App开发 Ubuntu Oracle
Ubuntu安装与使用详解:掌握开源操作系统的钥匙
遵循这些步骤和指南,你将能够顺利地开始使用Ubuntu,并充分利用其强大的功能和友好的界面。
|
11月前
|
存储 监控 安全
最多一个月,人脸识别技术应用备案轻松落地
根据《人脸识别技术应用安全管理办法》第十五条规定,应用人脸识别技术处理的人脸信息存储数量达到10万人的个人信息处理者,应当自数量达到之日起30个工作日内,向所在地省级网信部门履行备案手续
|
安全 Linux Shell
应急响应处置现场流程 - 文件痕迹排查笔记07
应急响应处置现场流程 - 文件痕迹排查笔记07
586 8
|
机器学习/深度学习 编解码 人工智能
rebuttal真的有用!这篇ICLR论文,所有审稿人都加了2分,直接跃升排名第9
SANA是一项基于线性扩散变换器的高效高分辨率图像合成框架,采用深度压缩自编码器和线性DiT模型,大幅提高图像合成效率与质量。引入解码器专用文本编码器提升图像与文本对齐能力,结合Flow-DPM-Solver优化训练和采样步骤。研究成果发表于ICLR会议,审稿评分显著提升。SANA生成速度快、模型小,适用于资源有限设备,但在某些方面仍有改进空间。论文地址:https://arxiv.org/abs/2410.10629
364 10
|
传感器 人工智能 Java
你知道数字电路的基础逻辑门电路吗,来拿下
基础逻辑门电路是数字电路的核心单元,包括与门、或门、非门、与非门、或非门、异或门和同或门。每种门电路执行特定的逻辑运算,产生相应的输出信号。例如,与门仅在所有输入为高电平时输出高电平;或门只要有一个输入为高电平就输出高电平;非门则对输入信号取反。这些门电路广泛应用于计算机CPU、报警系统、数据校验和同步电路中,是构建复杂数字系统的基石。
2078 0
你知道数字电路的基础逻辑门电路吗,来拿下
|
存储 分布式计算 MaxCompute
使用PAI-FeatureStore管理风控应用中的特征
PAI-FeatureStore 是阿里云提供的特征管理平台,适用于风控应用中的离线和实时特征管理。通过MaxCompute定义和设计特征表,利用PAI-FeatureStore SDK进行数据摄取与预处理,并通过定时任务批量计算离线特征,同步至在线存储系统如FeatureDB或Hologres。对于实时特征,借助Flink等流处理引擎即时分析并写入在线存储,确保特征时效性。模型推理方面,支持EasyRec Processor和PAI-EAS推理服务,实现高效且灵活的风险控制特征管理,促进系统迭代优化。
505 6
|
存储 弹性计算 监控
从外到内:阿里云弹性与资源交付效率的全景透视
本文介绍了弹性服务的概念及其在云计算中的重要性。弹性服务通过动态调整云资源,帮助用户应对流量波动,降低成本并提高自动化水平。文中详细探讨了如何从“使用弹性”迈向“善用弹性”,包括定时任务、报警任务和目标追踪等伸缩模式的应用。同时,文章还介绍了阿里云在ECS弹性能力方面的建设成果,如每分钟交付万台实例的能力,并分享了汇量科技和Auto MQ两个客户案例的成功实践。最后,展望了未来在弹性计算领域的技术创新和发展方向,强调了持续优化和提升弹性能力的重要性。
|
存储 SQL Oracle
AWR,即自动工作负荷资料档案库
【10月更文挑战第16天】AWR,即自动工作负荷资料档案库
624 3