开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

DataWorks如何使用maxcompute的资源包括?

DataWorks如何使用maxcompute的资源包括?

展开
收起
真的很搞笑 2023-09-30 08:29:01 67 0
1 条回答
写回答
取消 提交回答
  • 如果您的代码或函数中需要使用.jar等资源文件,您可以先上传资源至该工作空间,再进行引用。如果现有的系统内置函数无法满足您的需求,DataWorks支持创建自定义函数,实现个性化处理逻辑。将实现逻辑的JAR包上传至工作空间下,便可以在创建自定义函数时进行引用。说明您可以在函数列表面板查看系统内置的函数,详情请参见查看函数列表。您可以在MaxCompute函数面板查看在DataWorks提交或发布的函数,详情请参见MaxCompute函数。您可以将文本文件、Python代码以及.zip、.tgz、.tar.gz、.tar、.jar等压缩包作为不同类型的资源上传至MaxCompute,在UDF及MapReduce的运行过程中读取、使用资源。MaxCompute为您提供读取、使用资源的接口。目前资源包括以下类型:Python:您编写的Python代码,用于注册Python UDF函数。JAR:编译好的Java JAR包。Archive:通过资源名称中的后缀识别压缩类型,支持的压缩文件类型包括.zip、.tgz、.tar.gz、.tar和.jar。File:仅支持.zip、.so和.jar类型的File资源。JAR和File类型的资源,区别如下:JAR资源是您在线下Java环境编辑Java代码,打包为JAR包上传至DataWorks。File类型的小文件资源可以直接在DataWorks上编辑。新建File类型资源时,选中大文件,可以上传超过500 KB的本地资源文件。说明 目前支持最大可以上传50 MB资源。超过50 MB的资源,您可以通过MaxCompute客户端上传,并使用MaxCompute资源提交至DataWorks。详情请参见MaxCompute资源。
    https://help.aliyun.com/document_detail/136928.html,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2023-09-30 11:26:02
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    DataWorks高效数据分析最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    DataWorks调度任务迁移最佳实践-2020飞天大数据平台实战应用第一季 立即下载
    基于DataWorks数据服务构建疫情大屏-2020飞天大数据平台实战应用第一季 立即下载