开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

大数据计算MaxCompu使用pyodps 和 odpssql对mc表数据进行清洗处理 哪个效率高?

"1.请问大数据计算MaxCompute使用pyodps 和 odpssql对mc表数据进行清洗处理 哪个效率会高一些呢?

  1. 大数据计算MaxCompute的cte 产生的临时结果集 的生命周期有多长呢 可以在odps sql 节点 里面使用么?"

展开
收起
陈幕白 2023-11-07 19:30:53 42 0
1 条回答
写回答
取消 提交回答
  • 这取决于具体的应用场景。一般来说,在数据清洗方面,ODPS SQL更容易理解和使用,但是对于复杂的需求,可以考虑使用PyODPS。
    具体的区别包括:

    • PyODPS更加强大,可以进行更复杂的逻辑处理;
    • ODPS SQL较为简单,适合一般的筛选、排序等操作;
    • 在性能方面,PyODPS能够更好地利用GPU加速等功能,但是有一定的学习成本。
    2023-11-07 22:05:27
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

相关产品

  • 云原生大数据计算服务 MaxCompute
  • 相关电子书

    更多
    低代码开发师(初级)实战教程 立即下载
    冬季实战营第三期:MySQL数据库进阶实战 立即下载
    阿里巴巴DevOps 最佳实践手册 立即下载