namenode gc故障及解决办法记录

问题:
WARN org.apache.hadoop.hdfs.qjournal.client.QuorumJournalManager: Waited 19016 ms (timeout=20000 ms) for a response for sendEdits. Succeeded so far: [10.80.248.17:8486]

namenode gc overhead limit exceeded
原因:
1,网络原因-检查正常,如果延误可设置 hdfs-site.xml dfs.qjournal.write-txns.timeout.ms=60000
2,JVM GC的原因,分析可能集群运行久了,元数据信息增长导致超过内存配置,一般JVM都有内存限制;
查找发现 默认namenode内存的大小为1000M
修改:hadoop-env.sh
export HADOOP_HEAPSIZE=20
启动namenode正常使用。

原创文章,作者:carmelaweatherly,如若转载,请注明出处:https://blog.ytso.com/194051.html

(0)
上一篇 2021年11月15日
下一篇 2021年11月15日

相关推荐

发表回复

登录后才能评论