开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

DataWorks如何创建ODPS Spark节点创建Python资源?

DataWorks如何创建ODPS Spark节点创建Python资源?

展开
收起
真的很搞笑 2023-11-13 11:14:36 110 0
2 条回答
写回答
取消 提交回答
  • DataWorks创建ODPS Spark节点创建Python资源的过程如下:

    1. 登录DataWorks控制台,进入“作业管理”页面。
    2. 在左侧导航栏中选择“作业”,找到需要创建Python资源的作业。
    3. 点击作业名称,进入作业详情页面。
    4. 在作业详情页面中,点击“添加节点”按钮。
    5. 在弹出的对话框中,选择“ODPS Spark节点”。
    6. 填写ODPS Spark节点的配置信息,包括节点名称、执行类型(批处理或实时)、任务类型(Python或Spark SQL)等。
    7. 在“Python资源”部分,上传Python脚本文件。
    8. 根据需要配置其他参数,如输入输出表名、分区数等。
    9. 点击“确定”按钮,完成ODPS Spark节点的创建。
    2023-11-30 17:05:57
    赞同 1 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    以下是创建ODPS Spark节点使用Python资源的步骤:

    1. 登录 DataWorks 控制台,打开项目,在项目列表中选择一个项目并点击“打开”按钮。
    2. 在打开的项目主页中,点击左侧导航栏上的“数据开发”选项卡,进入数据开发界面。
    3. 在数据开发界面上方,点击右侧的绿色“新建”按钮,在弹出的下拉菜单中选择“ODPS Spark节点”选项,进入新建 ODPS Spark 节点的配置页面。
    4. 在新建 ODPS Spark 节点的配置页面上,填入节点名称和描述信息,并选择“Python”作为节点的语言类型,然后点击下方的“保存”按钮完成新建 ODPS Spark 节点的操作。
    5. 创建好 ODPS Spark 节点后,在节点列表中找到新创建的 ODPS Spark 节点,点击右侧面板上的“编辑”按钮,进入节点编辑界面。
    6. 在节点编辑界面的“代码编辑器”区域,编写 Python 代码,然后点击右上方的“提交”按钮完成代码的提交操作。
    2023-11-13 14:25:31
    赞同 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    Data+AI时代大数据平台应该如何建设 立即下载
    大数据AI一体化的解读 立即下载
    极氪大数据 Serverless 应用实践 立即下载