我是 hadoop、hive、hbase 和 kylin 的新手。我尝试安装前三个,它似乎正在工作。
之后我尝试安装 apache kylin,运行 sample.sh 并成功。
运行脚本后,我重新启动并打开 Web 界面。某些页面无法打开,例如:/cube、/models、/admin/config
问题是:我可以看到在 hive 中创建了 5 个表,并且还创建了 2 个多维数据集。但是当我在 web gui 中打开时,模型处于加载状态,我无法构建多维数据集。
我找不到任何信息日志(或者也许有一个,但我不知道)
kylin.log https://pastebin.com/TUZkQepa
hadoop-hadoop-namenode-master.log https://pastebin.com/T8eNt3PY
hadoop-hadoop-secondarynamenode-master.log https://pastebin.com/iMJDNFfU
yarn-hadoop-resourcemanager-master.log https://pastebin.com/TGwJWTRF
hbase-hadoop-zookeeper-master.log https://pastebin.com/Ym6eky5h
hbase-hadoop-master-master.log https://pastebin.com/p1ygfw4W
这是hadoop的配置(yarn-site.xml)
<configuration>
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>
<property>
<name>yarn.resourcemanager.scheduler.address</name>
<value>master:8030</value>
</property>
<property>
<name>yarn.resourcemanager.resource-tracker.address</name>
<value>master:8031</value>
</property>
<property>
<name>yarn.resourcemanager.address</name>
<value>master:8032</value>
</property>
</configuration>
hdfs-site.xml
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>
核心站点.xml
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://master:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/home/hadoop/tmp</value>
</property>
</configuration>
mapred-site.xml
<configuration>
<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>
</configuration>
hbase 区域服务器的配置
slave2
hbase-site.xml
<configuration>
<property>
<name>hbase.rootdir</name>
<value>hdfs://master:9000/hbase</value>
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
<name>hbase.zookeeper.property.dataDir</name>
<value>/home/hadoop/datadir</value>
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>master,slave2</value>
</property>
</configuration>
hive hive-site.xml 的配置
<configuration>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://master:3306/metastore?createDatabaseIfNotExist=true</value>
<description>metadata is stored in a MySQL server</description>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
<description>MySQL JDBC driver class</description>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
<description>user name for connecting to mysql server</description>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>gwudainget</value>
<description>password for connecting to mysql server</description>
</property>
<property>
<name>hive.cli.print.current.db</name>
<value>true</value>
<description>Whether to include the current database in the Hive prompt.</description>
</property>
</configuration>
对于 kylin,我使用默认配置,因为我真的不知道如何处理 kylin 配置。
我使用的是:hadoop 2.7.5 二进制 hbase 1.2.6 二进制 hive 1.2.2 二进制 kylin 2.2.0 源(我只是添加日志)