开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

dataworks 可以支持实时数仓吗?

dataworks 可以支持实时数仓吗?blink?

展开
收起
真的很搞笑 2024-03-04 08:40:00 66 0
2 条回答
写回答
取消 提交回答
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    DataWorks确实支持实时数仓的构建。以下是DataWorks支持实时数仓的几个关键点:

    • Hologres集成:DataWorks可以与实时数仓Hologres集成,通过可视化方式配置任务工作流、周期性调度执行任务及元数据管理,确保数据生产及管理的高效稳定。
    • 实时同步解决方案:DataWorks提供了实时同步解决方案,可以通过一键式配置并发布,实现离线全量和实时增量ETL过程。不过,这要求数据库表存在主键ID,并且可能无法给表额外增加etl_time字段。
    • MaxCompute计算服务:DataWorks基于云原生大数据计算服务MaxCompute,可以轻松构建离线数仓分析系统,这也为实时数据处理提供了基础。
    • 数据分类架构:在ODS层,DataWorks支持将数据分为数据准备区、离线数据和准实时数据区,这样的架构有助于实现数据的实时处理和分析。
    • 行业应用案例:有企业利用Hologres+Flink+DataWorks的组合构建实时数仓,实现了统一数据、服务、治理和存储的价值,这表明DataWorks在实际业务中已经得到了应用并取得了成效。

    综上所述,DataWorks不仅支持实时数仓的构建,还提供了多种工具和服务来优化实时数据处理和分析的流程。这些功能使得DataWorks成为构建和管理实时数仓的有力工具。

    2024-03-04 14:48:47
    赞同 展开评论 打赏
  • 可以。

    阿里云的日志服务的生态,增强用户体验。例如,无缝对接Blink、Elasticsearch、AnalyticDB for MySQL、E-MapReduce和DataV等产品。

    image.png

    文档 https://help.aliyun.com/zh/dataworks/use-cases/big-data-bi-analysis-based-on-maxcompute?spm=a2c4g.11186623.0.i41

    2024-03-04 08:57:45
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载