1

我正在尝试使用 hadoop ha 设置 hbase ha。我已经完成了 hadoop ha setup 的设置并对其进行了测试。

但是在 hbase 设置中，在启动时，我收到以下错误

java.lang.RuntimeException: Failed construction of Master: class org.apache.hadoop.hbase.master.HMaster.
    at org.apache.hadoop.hbase.master.HMaster.constructMaster(HMaster.java:2426)
    at org.apache.hadoop.hbase.master.HMasterCommandLine.startMaster(HMasterCommandLine.java:231)
    at org.apache.hadoop.hbase.master.HMasterCommandLine.run(HMasterCommandLine.java:137)
    at org.apache.hadoop.util.ToolRunner.run(ToolRunner.java:70)
    at org.apache.hadoop.hbase.util.ServerCommandLine.doMain(ServerCommandLine.java:126)
    at org.apache.hadoop.hbase.master.HMaster.main(HMaster.java:2436)
Caused by: java.lang.IllegalArgumentException: java.net.UnknownHostException: hdfs-nameservice
    at org.apache.hadoop.security.SecurityUtil.buildTokenService(SecurityUtil.java:373)
    at org.apache.hadoop.hdfs.NameNodeProxies.createNonHAProxy(NameNodeProxies.java:258)
    at org.apache.hadoop.hdfs.NameNodeProxies.createProxy(NameNodeProxies.java:153)
    at org.apache.hadoop.hdfs.DFSClient.<init>(DFSClient.java:602)
    at org.apache.hadoop.hdfs.DFSClient.<init>(DFSClient.java:547)
    at org.apache.hadoop.hdfs.DistributedFileSystem.initialize(DistributedFileSystem.java:139)
    at org.apache.hadoop.fs.FileSystem.createFileSystem(FileSystem.java:2591)
    at org.apache.hadoop.fs.FileSystem.access$200(FileSystem.java:89)
    at org.apache.hadoop.fs.FileSystem$Cache.getInternal(FileSystem.java:2625)
    at org.apache.hadoop.fs.FileSystem$Cache.get(FileSystem.java:2607)
    at org.apache.hadoop.fs.FileSystem.get(FileSystem.java:368)
    at org.apache.hadoop.fs.Path.getFileSystem(Path.java:296)
    at org.apache.hadoop.hbase.util.FSUtils.getRootDir(FSUtils.java:1003)
    at org.apache.hadoop.hbase.regionserver.HRegionServer.<init>(HRegionServer.java:570)
    at org.apache.hadoop.hbase.master.HMaster.<init>(HMaster.java:381)
    at sun.reflect.NativeConstructorAccessorImpl.newInstance0(Native Method)
    at sun.reflect.NativeConstructorAccessorImpl.newInstance(NativeConstructorAccessorImpl.java:62)
    at sun.reflect.DelegatingConstructorAccessorImpl.newInstance(DelegatingConstructorAccessorImpl.java:45)
    at java.lang.reflect.Constructor.newInstance(Constructor.java:423)
    at org.apache.hadoop.hbase.master.HMaster.constructMaster(HMaster.java:2419)
    ... 5 more
Caused by: java.net.UnknownHostException: hdfs-nameservice
    ... 25 more

我认为我的 hbase 设置无法识别我的名称服务 hdfs-nameservice。

我正在使用 Hbase 1.2.4 和 Hadoop 2.7.3。

我的 hbase-site.xml 有

    <property>
            <name>hbase.rootdir</name>
            <value>hdfs://hdfs-nameservice/hbase</value>
    </property>

core-site.xml 有

    <property>
            <name>fs.defaultFS</name>
            <value>hdfs://hdfs-nameservice:8020</value>
    </property>

和 hdfs-site.xml 有

    <property>
            <name>dfs.nameservices</name>
            <value>hdfs-nameservice</value>
    </property>
    <property>
            <name>dfs.ha.namenodes.hdfs-nameservice</name>
            <value>namenode1,namenode2</value>
    </property>
    //with rpc, http address confs for both namenode1&2

试过： 1. 复制了 hbase conf 目录中的 core 和 hdfs-site xmls。2. 在环境变量和 hbase-env.sh 中添加 Hadoop conf 路径

仍然无法弄清楚如何让我的 hbase 识别 hdfs-nameservice。

任何帮助将非常感激。

4

0 回答 0