DataWorks中Stream Studio在何处创建实时计算项目?

DataWorks中Stream Studio在何处创建实时计算项目,并与Stream Studio进行关联?

展开
收起
真的很搞笑 2023-08-08 16:58:11 135 分享 版权
阿里云 AI 助理回答

在阿里云DataWorks中,Stream Studio用于创建和管理实时计算项目,并支持与Stream Studio进行关联。以下是具体的操作步骤:


1. 创建实时计算项目

实时计算项目的创建需要通过DataWorks的**数据开发(DataStudio)**模块完成。具体步骤如下:

  1. 登录DataWorks控制台
    登录阿里云DataWorks控制台,切换至目标地域。

  2. 进入数据开发页面
    在左侧导航栏中,单击数据开发与运维 > 数据开发,选择对应的工作空间后,单击进入数据开发

  3. 新建业务流程
    在数据开发页面中,右键单击目标目录,选择新建业务流程。业务流程是组织和管理实时计算任务的基础单元。

  4. 创建实时计算节点

    • 在业务流程中,右键单击目标目录,选择新建节点 > Flink SQL StreamingEMR Spark Streaming
    • 在弹出的对话框中,输入节点名称,选择引擎实例、节点类型及路径,单击确认以进入节点编辑页面。

2. 与Stream Studio关联

Stream Studio是DataWorks中专门用于流计算任务开发的工具,支持DAG与SQL双模式开发,并可实现可视化作业运维。以下是将实时计算项目与Stream Studio关联的步骤:

  1. 进入Stream Studio

    • 在DataWorks工作空间列表页,切换至目标地域,找到已创建的工作空间。
    • 单击操作列的快速进入 > Stream Studio,进入Stream Studio页面。
  2. 绑定计算资源

    • 在Stream Studio页面中,单击左侧导航栏的计算资源管理,进入计算资源管理页面。
    • 单击绑定计算资源,选择需要绑定的计算资源类型(如Flink或EMR),并根据界面提示完成参数配置。
  3. 导入实时计算项目

    • 在Stream Studio中,选择文件管理项目管理模块。
    • 将之前在数据开发模块中创建的实时计算项目导入至Stream Studio中,确保项目与Stream Studio完成关联。
  4. 配置实时任务

    • 在Stream Studio中,使用可视化DAG或SQL编辑器对实时计算任务进行开发。
    • 支持实时任务的调试、发布和运维操作,确保任务能够正常运行。

重要说明

  • 权限要求:确保当前账号已被添加至对应工作空间,并具有开发空间管理员角色权限。
  • 计算资源限制:Stream Studio仅支持绑定特定类型的计算资源(如Flink或EMR),请确保已正确配置相关资源。
  • 公测功能:Stream Studio的部分功能可能处于公测阶段,需提前申请开通。

通过上述步骤,您可以在DataWorks中成功创建实时计算项目,并将其与Stream Studio进行关联,从而高效地完成实时数据处理任务。

有帮助
无帮助
AI 助理回答生成答案可能存在不准确,仅供参考
0 条回答
写回答
取消 提交回答

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

还有其他疑问?
咨询AI助理