开发者社区> 问答> 正文

请问,MaxCompute支持mapreduce进行mapjoin开发嘛

现在正在使用maxcompute进行开发mapreduce,但在官方给的文档中,只标明了可以进行单一reduce端的join。 这样肯定是有问题的,而且阿里的文档里面也说了这样容易出现数据倾斜。 可是我找遍了sdk,却也没找到这样一个能够进行mapjoin的函数。 唯一一个比较相像的context.readResourceTable也确认并不是能够将小表提前map端全部拿到后,直接存在内存中的方法。 请问,maxcompute在封装了原始mr之后,mapjoin这样的函数是否已经彻底废弃了呢?

展开
收起
游客bcoai27mn6oag 2020-07-15 00:11:46 4494 0
1 条回答
写回答
取消 提交回答
  • MaxCompute 是面向分析的企业级 SaaS 模式云数据仓库,以 Serverless 架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您可以经济并高效的分析处理海量数据。

    您好,在sql中有map join可以参考 参考文档: https://help.aliyun.com/document_detail/73785.html 如果使用MapReduce实现map join可以参考开源。

    如有更多疑问咨询可以加入MaxCompute开发者社区钉群点击链接

    2020-07-24 17:22:05
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
阿里云EMR2.0 平台:让大数据更简单 立即下载
阿里云EMR 2.0:重新定义新一代开源大数据平台 立即下载
2022年开源大数据热力报告 立即下载