开发者社区 > 大数据与机器学习 > 大数据计算 MaxCompute > 正文

pyodps是会先转化为sql,再转化成mapreduce吗?

我看在使用pyodps的时候,控制台的输出会是一段段sql,这是否意味着其是先转化为sql再转化mapreduce任务

展开
收起
离原 2023-03-13 20:41:49 465 0
3 条回答
写回答
取消 提交回答
  • 在使用pyodps时,控制台的输出是一段段SQL语句,这意味着pyodps会将您的Python代码转换为SQL语句,然后将其提交给MaxCompute进行执行。这种方式可以提高执行效率,并且使得您可以使用SQL的强大功能来处理数据。同时,pyodps还支持将Python代码转换为MapReduce任务,以便更好地处理大规模数据。

    2023-03-14 08:47:42
    赞同 展开评论 打赏
  • GitHub https://github.com/co63oc/cloud

    输出sql可以查看信息

    2023-03-14 07:54:44
    赞同 展开评论 打赏
  • 公众号:网络技术联盟站,InfoQ签约作者,阿里云社区签约作者,华为云 云享专家,BOSS直聘 创作王者,腾讯课堂创作领航员,博客+论坛:https://www.wljslmz.cn,工程师导航:https://www.wljslmz.com

    从原理上来讲,确实就是这样的。

    2023-03-14 07:41:40
    赞同 展开评论 打赏

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

热门讨论

热门文章

相关电子书

更多
SQL Server在电子商务中的应用与实践 立即下载
GeoMesa on Spark SQL 立即下载
原生SQL on Hadoop引擎- Apache HAWQ 2.x最新技术解密malili 立即下载