hive踩坑记录之报错：Java heap space_io.sort.mb

作者：2023面试高手 | 2024-05-05 15:43:08

踩

io.sort.mb

分享一个hive的踩坑记录，执行需要跑MapReduce任务的语句时，报错Error: Java heap space（JAVA 堆空间不足），排查该错误是由于hive任务所使用的内存数量造成的
解决办法：
1、第一个方案
在hive-env.sh中进行更改：
添加
export HADOOP_HEAPSIZE=4096这个属性
2、第二个方案
设置 set io.sort.mb=10; 默认值是100
io.sort.mb 的作用是排序所使用的内存数量，默认值： 100M，需要与mapred.child.java.opts相配默认：-Xmx200m，io.sort.mb的值不能超过mapred.child.java.opt的值，否则会报JAVA堆内存不足的错误。

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/2023面试高手/article/detail/539619