开发者社区> 问答> 正文

Join连接-MapJoin优化时数据倾斜,导致长尾该如何操作呢?

Join连接-MapJoin优化时数据倾斜,导致长尾该如何操作呢?

展开
收起
bnbajjyhyjfty 2021-12-12 10:29:18 587 0
1 条回答
写回答
取消 提交回答
  • 操作: ·热点Key尽量先去重或过滤无效值

    ·对一些热点缺省无效值加一个随机前缀,分散数据

    修改SQL隔离热点Key和非热点Key分别做关联,再union all起来指定mapjoin

    增加源表作为大表的并发度setodps.sqlmappersplitsize=128,

    增加子查询作为大表并发度setodpssqljoinerinstances=1111

    2021-12-12 10:31:14
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载