开发者社区> 问答> 正文

实时数据中台的DWD层(明细数据层)是干什么的?

已解决

实时数据中台的DWD层(明细数据层)是干什么的?

展开
收起
与时俱进的探索者 2022-04-07 09:38:37 1207 0
1 条回答
写回答
取消 提交回答
  • 推荐回答

    DWD层(明细数据层): 实时计算引擎订阅业务数据消息队列,然后通过数据清洗、多数据源join、流式数据与离线维度信息等的组 合,将一些相同粒度的业务系统、维表中的维度属性全部关联到一起,增加数据易用性和复用性,得到最终的实时明细数据。这部 分数据有两个分支,一部分直接落地到ADS,供实时明细查询使用,一部分再发送到消息队列或datahub中,供DWS计算使用。同 时,为了帮助后续问题回溯和排查方便,我们往往会在在这个环节向离线计算存储引擎归档一份数据。以上信息摘自《新服务》,这本电子书收录开发者藏经阁下载地址:https://developer.aliyun.com/topic/download?id=8306

    2022-04-07 20:32:53
    赞同 展开评论 打赏
来源圈子
更多
收录在圈子:
阿里云开发者社区官方技术圈,用户产品功能发布、用户反馈收集等。
问答排行榜
最热
最新

相关电子书

更多
消电行业数据中台解决方案白皮书 立即下载
(终极版)2020阿里云金融数据中台报告 立即下载
2020年中国乳制品行业数据中台研究报告 立即下载