wangyne_个人页
wangyne
文章
0
问答
1
视频
0
个人介绍
暂无个人介绍
擅长的技术
暂无更多信息
2020年01月
-
01.15 15:29:55
回答了问题
2020-01-15 15:29:55
暂无更多信息
-
回答了问题
2020-01-15
大佬们咨询个问题，就是使用Spark On Hive时，动态的将数据插入到Hive中，但是在Hive的数据表下会有很多文件，这个可以怎么设置一下呢
--只有shufflu时才有效 set spark.sql.adaptive.enabled=true; set spark.sql.adaptive.shuffle.targetPostShuffleInputSize=128000000; set spark.sql.shuffle.partitions=10;赞0 踩0 评论0
滑动查看更多
暂无更多信息