开发者社区 问答 正文

使用WithDistmapjoin解决数据倾斜问题时,还需要注意什么问题?

使用WithDistmapjoin解决数据倾斜问题时,还需要注意什么问题?

展开
收起
花开富贵111 2024-05-23 15:36:17 46 分享 版权
1 条回答
写回答
取消 提交回答
  • 在使用WithDistmapjoin解决数据倾斜问题时,还需要注意热点问题其实并没有完全消除,而是转移成了远程网络查询的IO热点问题。这可以通过技术实现细节上的优化来进一步削弱热点问题,如将同一key的多次查询合并为一次。

    2024-05-23 15:54:35
    赞同 1 展开评论
问答地址: