当前位置:   article > 正文

hive java.lang.OutOfMemoryError: Java heap space

hive java.lang.outofmemoryerror: java heap space

hive 开启了hiveServer2服务,连接了一段时间就拒绝连接,hive日志报错如下:
Exception in thread "org.apache.hadoop.hive.common.JvmPauseMonitor$Monitor@56b9d43f" java.lang.OutOfMemoryError: Java heap space
Exception in thread "TriggerValidator" java.lang.OutOfMemoryError: Java heap space
java.io.IOException: DestHost:destPort 10.38.248.149:9000 , LocalHost:localPort vm10-38-248-149.ksc.com/127.0.0.1:0. Failed on local exception: java.io.IOException: Couldn't set up IO streams: java.lang.OutOfMemoryError: Java heap space

问题原因:

客户端用户连接hiveServer2服务后没有关闭,到底资源一直占用浪费

解决方式:

客户端:

增加 conn.dispose(),每次代码连接完成关闭资源

服务端:

1.重启hiveServer2服务,直接将所有连接都断了嘛

2.修复hive-site.xml文件,增加内存大小

  1. <property>
  2. <name>yarn.scheduler.maximum-allocation-mb</name>
  3. <value>2048</value>
  4. </property>
  5. <property>
  6. <name>yarn.scheduler.minimum-allocation-mb</name>
  7. <value>2048</value>
  8. </property>
  9. <property>
  10. <name>yarn.nodemanager.vmem-pmem-ratio</name>
  11. <value>2.1</value>
  12. </property>
  13. <property>
  14. <name>mapred.child.java.opts</name>
  15. <value>-Xmx1024m</value>
  16. </property>

 

本文内容由网友自发贡献,转载请注明出处:https://www.wpsshop.cn/w/IT小白/article/detail/539690
推荐阅读
相关标签
  

闽ICP备14008679号