本文主要是介绍解决HMaster启动后几秒之内马上挂掉的问题,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
爱上看Hbase日志,身为小白白的我,一开始日志在哪我都不知道!路径:cat $HBASE_HOME/logs/hbase-hadoop-master-Master.log(也就是安装hbase下的logs文件夹中))。
日志白茫茫一片怎么看呢,其实Info什么的都不用管,直奔ERROR就可以。
如下:
2018-11-25 19:42:52,179 ERROR [Thread-14] master.HMaster: ***** ABORTING master ubuntu,16000,1543203761945: Unhandled exception. Starting shutdown. *****
java.lang.IllegalStateException: The procedure WAL relies on the ability to hsync for proper operation during component failures, but the underlying filesystem does not support doing so. Please check the config value of 'hbase.procedure.store.wal.use.hsync' to set the desired level of robustness and ensure the config value of 'hbase.wal.dir' points to a FileSystem mount that can provide it.
at org.apache.hadoop.hbase.procedure2.store.wal.WALProcedureStore.rollWriter(WALProcedureStore.java:1044)
at org.apache.hadoop.hbase.procedure2.store.wal.WALProcedureStore.recoverLease(WALProcedureStore.java:383)
at org.apache.hadoop.hbase.procedure2.ProcedureExecutor.init(ProcedureExecutor.java:649)
at org.apache.hadoop.hbase.master.HMaster.createProcedureExecutor(HMaster.java:1282)
在网上查了一下是不支持这个什么hsync,也就是hadoop现在不兼容hive这个版本,hive还不支持最新的hadoop。
唉,我干嘛装那么新的hadoop,3.0.3。连hive最新版本都不支持。
log文件报错java.lang.IllegalStateException: The procedure WAL relies on the ability to hsync for proper operation during component failures, but the underlying filesystem does not support doing so. Please check the config value of 'hbase.procedure.store.wal.use.hsync' to set the desired level of robustness and ensure the config value of 'hbase.wal.dir' points to a FileSystem mount that can provide it. 看网上没有解决方案,调了一天快疯了。说hbase下挂载的文件系统不支持hsyc,这怎么改?
后来发现是版本问题,我hadoop版本是2.9.0,hbase版本是2.0.0。网上的版本匹配到hadoop2.7.0后就没有了,而hbase 的官网上我只找到了2.0.0版本的下载,所以我以为最新版的就支持hadoop2.9.0。后来我将安装好的hbase删除,下载了1.4.4版本的hbase,用同样的方法配置启动,Hmaster再也没有挂掉,web配置页面也正常访问。下面给出一个提供多个hbase版本的镜像的一个网站:
http://mirrors.shuosc.org/apache/hbase/
初学hbase,在版本选择上还要注意各个版本的对应问题。
官网(http://hbase.apache.org/book.html#java)信息如下:
HBase-1.2.x | HBase-1.3.x | HBase-2.0.x | |
Hadoop-2.4.x | 支持 | 支持 | 不支持 |
Hadoop-2.5.x | 支持 | 支持 | 不支持 |
Hadoop-2.6.0 | 不支持 | 不支持 | 不支持 |
Hadoop-2.6.1+ | 支持 | 支持 | 支持 |
Hadoop-2.7.0 | 不支持 | 不支持 | 不支持 |
Hadoop-2.7.1+ | 支持 | 支持 | 支持 |
Hadoop-2.8.[0-1] | 不支持 | 不支持 | 不支持 |
Hadoop-2.8.2 | 未测试 | 未测试 | 未测试 |
Hadoop-2.8.3+ | 未测试 | 未测试 | 支持 |
Hadoop-2.9.0 | 不支持 | 不支持 | 不支持 |
Hadoop-3.0.0 | 未测试 | 未测试 | 未测试 |
hbase暂时搞不了了,额无所谓,先用实验楼上面的环境吧,后面我会把整个hadoop组件全重装一遍,估计半天到一天就搞定了。
这篇关于解决HMaster启动后几秒之内马上挂掉的问题的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!