开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

如何在dataworks 接入flink 项目?

如何在dataworks 接入flink 项目?

展开
收起
滴滴滴~ 2023-03-29 14:12:19 309 0
2 条回答
写回答
取消 提交回答
  • dataworks只支持Blink独享和共享集群(这两种已停售),flink全托管建议直接使用flink控制台中自带的开发工具。 此答案整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-03-29 20:59:51
    赞同 展开评论 打赏
  • 月移花影,暗香浮动

    在DataWorks接入Flink项目,需要完成以下步骤:

    1. 创建Flink项目:在Flink集群中创建一个项目,并根据需要添加需要的资源,如JAR包、配置文件等;

    2. 配置Flink项目的运行参数:根据业务需要,设置Flink作业运行的参数,例如streaming data源、转换算子、sink 数据汇等相关参数;

    3. 导入Flink项目:在DataWorks中导入Flink项目,按照步骤进行配置和上传JAR包;

    4. 创建DataWorks节点:在DataWorks工作流中创建一个节点,选择Flink项目作为数据处理引擎,并配置相关参数;

    5. 调度运行DataWorks节点:在DataWorks中配置好Flink项目的节点后,可以通过调度系统进行计划任务管理,调度节点完成相关数据处理任务。

    以上是大致的步骤,具体需要根据实际情况进行调整和操作。

    2023-03-29 16:04:49
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 热门讨论

    热门文章

    相关电子书

    更多
    DataWorks数据集成实时同步最佳实践(含内测邀请)-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks商业化资源组省钱秘籍-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载