开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

使用Tunnel Upload命令上传数据时,提示内存溢出,如何解决?

已解决

使用Tunnel Upload命令上传数据时,提示内存溢出,如何解决?

展开
收起
游客rda5n5ukztvu2 2022-10-08 17:27:26 88 0
1 条回答
写回答
取消 提交回答
  • 采纳回答

    Tunnel Upload命令支持上传海量数据,如果出现内存溢出,可能是因为数据的行分隔符和列分隔符设置错误,导致整个文本被认为是同一条数据,全部缓存至内存中,导致内存溢出报错。

    这种情况下可以先用少量的数据进行测试,当-td及-fd调试成功后再上传全量数据。

    2022-10-08 17:30:34
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载