开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

你好,这个大数据计算MaxCompute问题有解决方案吗?不是数据同步,是sql计算时

问题1: https://developer.aliyun.com/ask/473350 你好,这个大数据计算MaxCompute问题有解决方案吗?不是数据同步,是sql计算时:FAILED: ODPS-0010000:System internal error - fuxi job failed, caused by: String length 43272229 is larger than maximum 8388608
问题2:只能从数据着手处理是吗?不能通过配置调整最大长度?

展开
收起
cuicuicuic 2023-08-13 11:12:04 121 0
2 条回答
写回答
取消 提交回答
  • 北京阿里云ACE会长

    回答1:根据提供的信息,这个问题是关于MaxCompute的计算任务出现了错误。错误信息显示字符串长度超过了最大限制,导致任务失败。根据阿里云开发者社区中的回答,这个问题已经得到解决,解决方案是优化数据,即减小字符串的长度。具体的优化方法可能需要根据具体情况进行调整和处理。

    回答2:根据提供的信息,调整最大长度可能不是解决这个问题的直接方法。在MaxCompute中,对于字符串长度有一定的限制,超过最大限制会导致任务失败。因此,解决这个问题的关键是减小字符串的长度或优化数据。调整最大长度可能需要深入了解MaxCompute的配置和限制,但并不是解决这个具体问题的推荐方法。建议根据错误信息中提到的具体字符串长度,优化相关数据或字符串处理方式,以确保在允许的最大长度范围内进行计算任务。

    2023-08-13 22:48:27
    赞同 展开评论 打赏
  • 超限制了,得拆分下数据,此回答整理自钉群“MaxCompute开发者社区2群”

    2023-08-13 11:58:21
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 热门讨论

    热门文章

    相关电子书

    更多
    大数据AI一体化的解读 立即下载
    极氪大数据 Serverless 应用实践 立即下载
    大数据&AI实战派 第2期 立即下载