0

我是 hadoop、hive、hbase 和 kylin 的新手。我尝试安装前三个,它似乎正在工作。

之后我尝试安装 apache kylin,运行 sample.sh 并成功。

运行脚本后,我重新启动并打开 Web 界面。某些页面无法打开,例如:/cube、/models、/admin/config

问题是:我可以看到在 hive 中创建了 5 个表,并且还创建了 2 个多维数据集。但是当我在 web gui 中打开时,模型处于加载状态,我无法构建多维数据集。

在此处输入图像描述

当我尝试构建立方体时 在此处输入图像描述

我找不到任何信息日志(或者也许有一个,但我不知道)

kylin.log https://pastebin.com/TUZkQepa

hadoop-hadoop-namenode-master.log https://pastebin.com/T8eNt3PY

hadoop-hadoop-secondarynamenode-master.log https://pastebin.com/iMJDNFfU

yarn-hadoop-resourcemanager-master.log https://pastebin.com/TGwJWTRF

hbase-hadoop-zookeeper-master.log https://pastebin.com/Ym6eky5h

hbase-hadoop-master-master.log https://pastebin.com/p1ygfw4W

这是hadoop的配置(yarn-site.xml)

<configuration>
    <property>
        <name>yarn.nodemanager.aux-services</name>
        <value>mapreduce_shuffle</value>
    </property>
    <property>
        <name>yarn.resourcemanager.scheduler.address</name>
        <value>master:8030</value>
    </property>
    <property>
        <name>yarn.resourcemanager.resource-tracker.address</name>
        <value>master:8031</value>
    </property>
    <property>
        <name>yarn.resourcemanager.address</name>
        <value>master:8032</value>
    </property>
</configuration>

hdfs-site.xml

<configuration>
    <property>
        <name>dfs.replication</name>
        <value>1</value>
    </property>
</configuration>

核心站点.xml

<configuration>
    <property>
        <name>fs.defaultFS</name>
        <value>hdfs://master:9000</value>
    </property>
    <property>
      <name>hadoop.tmp.dir</name>
      <value>/home/hadoop/tmp</value>
  </property>
</configuration>

mapred-site.xml

<configuration>
    <property>
        <name>mapreduce.framework.name</name>
        <value>yarn</value>
    </property>
</configuration>

hbase 区域服务器的配置

slave2

hbase-site.xml

<configuration>
    <property>
        <name>hbase.rootdir</name>
        <value>hdfs://master:9000/hbase</value>
    </property>
    <property>
        <name>hbase.cluster.distributed</name>
        <value>true</value>
    </property>
    <property>
        <name>hbase.zookeeper.property.dataDir</name>
        <value>/home/hadoop/datadir</value>
    </property>
    <property>
        <name>hbase.zookeeper.quorum</name>
        <value>master,slave2</value>
    </property>
</configuration>

hive hive-site.xml 的配置

<configuration>
  <property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://master:3306/metastore?createDatabaseIfNotExist=true</value>
    <description>metadata is stored in a MySQL server</description>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
    <description>MySQL JDBC driver class</description>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>root</value>
    <description>user name for connecting to mysql server</description>
  </property>
  <property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>gwudainget</value>
    <description>password for connecting to mysql server</description>
  </property>
  <property>
    <name>hive.cli.print.current.db</name>
    <value>true</value>
    <description>Whether to include the current database in the Hive prompt.</description>
  </property>
</configuration>

对于 kylin,我使用默认配置,因为我真的不知道如何处理 kylin 配置。

我使用的是:hadoop 2.7.5 二进制 hbase 1.2.6 二进制 hive 1.2.2 二进制 kylin 2.2.0 源(我只是添加日志)

4

0 回答 0