开发者社区 > 大数据与机器学习 > 大数据开发治理DataWorks > 正文

dataworks中Python 自定义udf函数这是什么原因?

dataworks中Python 自定义udf函数这是什么原因?failed: ODPS-0130071:[1,8] Semantic analysis exception - class Ssf for user defined function ansy_xx cannot be loaded from any resources

展开
收起
真的很搞笑 2024-03-04 09:06:27 78 0
3 条回答
写回答
取消 提交回答
  • 问题描述
    Python读取MaxCompute表无法获取UDF信息,并提示以下错误。

    FAILED:ODPS-0130071:[1,8] Semantic analysis exception - failed to get Udf info form maxpt.py,error output is : Traceback (most recent call last):
    系统显示类似如下。
    0d54a629171c4ff2a3b2b43f655a1f9b_bb67e64f-d390-460f-93a2-76652564ed4b.png

    问题原因
    Python UDF不支持使用PyODPS。

    解决方案
    读取MaxCompute表,需要通过读取表资源的方式来实现。

    参考https://help.aliyun.com/zh/dataworks/resolve-the-issue-that-a-pyodps-node-fails-to-obtain-udf-information-when-it-reads-a-maxcompute-table?spm=a2c4g.11186623.0.i43

    2024-03-31 11:34:10
    赞同 1 展开评论 打赏
  • 面对过去,不要迷离;面对未来,不必彷徨;活在今天,你只要把自己完全展示给别人看。

    这个错误信息表示在DataWorks中,Python自定义的UDF函数无法被加载。可能的原因有:

    1. 类Ssf的定义有问题,可能是语法错误或者引用了不存在的库或模块。
    2. UDF函数的定义和调用不匹配,例如参数类型、数量不一致。
    3. 资源文件(如jar包)没有正确上传到DataWorks。

    为了解决这个问题,你需要检查以下几点:

    1. 确保类Ssf的定义正确,没有语法错误,并且引用的库或模块存在。
    2. 检查UDF函数的定义和调用是否一致,包括参数类型、数量等。
    3. 确保资源文件(如jar包)已经正确上传到DataWorks。
    2024-03-04 14:38:39
    赞同 展开评论 打赏
  • 资源和函数确认都已经提交发布了么 可以执行list resources; 查看一下 ,此回答整理自钉群“DataWorks交流群(答疑@机器人)”

    2024-03-04 10:08:17
    赞同 1 展开评论 打赏

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

相关产品

  • 大数据开发治理平台 DataWorks
  • 相关电子书

    更多
    From Python Scikit-Learn to Sc 立即下载
    Data Pre-Processing in Python: 立即下载
    双剑合璧-Python和大数据计算平台的结合 立即下载