开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks中cn-shanghai-corp loghub的数据如何进行集成?

DataWorks中cn-shanghai-corp loghub的数据如何进行集成?

展开
收起
真的很搞笑 2023-09-12 17:55:34 38 0
2 条回答
写回答
取消 提交回答
  • 可以参考LogHub(SLS)数据源配置。
    image.png
    image.png

    2023-09-16 00:43:36
    赞同 展开评论 打赏
  • DataWorks中cn-shanghai-corp loghub的数据可以通过以下步骤进行集成:

    1、在DataWorks中创建一个数据集成任务,选择数据源为cn-shanghai-corp loghub。
    2、配置数据源信息,包括access id、access key、endpoint等。
    3、配置数据目标,包括目标表、目标数据库等。
    4、配置数据转换规则,例如去重、筛选、排序等。
    5、测试数据集成任务,确保数据能够正确地从cn-shanghai-corp loghub中抽取、转换和加载到目标表中。
    6、启动数据集成任务,开始实时或定时地从cn-shanghai-corp loghub中抽取数据并加载到目标表中。

    2023-09-15 16:59:22
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    阿里邮箱—安全高效集成 立即下载
    集成智能接入网关APP:优化企业级移动办公网络 立即下载
    云效助力企业集成安全到DevOps中 立即下载