开发者社区 问答 正文

DataWorks 中 DataStudio(数据开发)节点类型都有什么?

DataWorks 中 DataStudio(数据开发)节点类型都有什么?

展开
收起
芯在这 2021-12-08 10:17:15 976 分享 版权
1 条回答
写回答
取消 提交回答
  • 离线同步节点 数据同步功能

    ODPS SQL

    ODPS SQL采用类似SQL的语法,适用于海量数据(TB级)但实时性 要求不高的分布式处理场景。

    SQL组件节点

    SQL组件是一种带有多个输入参数和输出参数的SQL代码过程模板,SQL代码的处理过程通常是引入一到多个源数据表,通过过滤、连接和聚合等操作,加工出新的业务需要的目标表。

    ODPS Spark

    以JAR类型的资源,操作spark

    PyODPS

    可以在DataWorks的PyODPS节点上,直接编辑Python代码,用于操作MaxCompute

    ODPS Script

    ODPS Script节点的SQL开发模式是MaxCompute基于2.0的SQL引擎提供的脚本开发模式。

    ODPS MR

    ODPS MR类型节点可以使用MapReduce Java API编写MapReduce程序来处理MaxCompute中的数据。

    管理MaxCompute中的表

    资源

    jar包等资源管理

    函数

    支持Python和Java两种语言接口

    2021-12-08 10:20:15
    赞同 展开评论