Hive如何开启mapjoin优化

Hive如何开启mapjoin优化,第1张

Hive如何开启mapjoin优化
set hive.optimize.skewjoin=true; //有数据倾斜时开启负载均衡,默认false
set hive.auto.convert.join=true; //设置自动选择MapJoin,默认是true
set hive.auto.convert.join.noconditionaltask=true; //map-side join
set hive.auto.convert.join.noconditionaltask.size=300000000; //多大的表可以自动触发放到内层LocalTask中,默认大小10M
set hive.mapjoin.smalltable.filesize=500000000; //设置mapjoin小表的文件大小为20M,小表阈值

欢迎分享,转载请注明来源:内存溢出

原文地址:https://54852.com/zaji/5654251.html

(0)
打赏 微信扫一扫微信扫一扫 支付宝扫一扫支付宝扫一扫
上一篇 2022-12-16
下一篇2022-12-16

发表评论

登录后才能评论

评论列表(0条)

    保存