问题标签 [cloudera-manager]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
1 回答
424 浏览

hadoop - 在 3 个 AWS EBS EC2 实例上安装 Cloudera

我之前发布了一个类似的问题,但该 问题的答案对 我没有帮助。

我想使用 cloudera 在 AWS 上设置一个三节点 Hadoop 集群。我已经参考了几个链接,其中有分步指南如何逐步执行这些集群:

链接1

链接2

我所有这些链接都提到了我已经尝试过的步骤,但是由于这些安装是基于实例存储的实例完成的。我没有停止这些实例的选项,安装完成只有选项 (rebbot/terminate) 。我也尝试过首先启动三个基于 EBS 的实例,然后开始安装其中一个,然后尝试在安装时添加另外两个实例,就像这样。但它没有检测到其他两个实例作为这个数据节点,我不确定使用什么其他方法。这方面的任何答案都会非常有帮助。

0 投票
1 回答
1502 浏览

cloudera - 5 个节点的 Cloudera 安装的主机文件配置应该是什么?

我正在尝试在 5 台机器上安装 Cloudera 集群 - 4 台作为 ubuntu 12.04,1 台作为 Oracle Enterprise Linux 5.8。我已经在 Oracle Linux Enterprise 主机上运行 Cloudera Manager 安装程序,它应该充当名称节点(IP 地址为 192.168.1.185),其他 4 个 Ubuntu 主机应该充当数据节点。我已完成所有先决条件,并将主机文件配置为:

对于 Ubuntu:

对于 Oracle 企业 Linux:

我不确定此配置是否正确,因为我遇到了与反向 DNS 相关的错误,如下所示:

0 投票
2 回答
1118 浏览

hadoop - Apache Flume 连接到 twitter API 401:身份验证凭据

我正在尝试使用 Apache Flume 将推文保存到我的 HDFS。我目前正在将 Cloudera 映像与 Hadoop 和 Flume 一起使用。我正在关注 Cloudera 博客中的教程,但我无法连接到 Twitter API。

我收到以下错误:

我已将我的 twitter API 凭据复制到 flume.conf(我在磁盘和 Web UI 上都尝试过)。我也尝试过重新生成它们并复制那些新的,但这对我没有帮助。

我的 pom.xml 包含:

这意味着不应该存在此处描述的问题。

我还通过命令设置了系统时间:

有没有人知道什么可能是错的?非常感谢您的任何建议和帮助。

0 投票
1 回答
66 浏览

hadoop - 在非对称操作系统上安装 Hadoop?

我在两个节点上有 Cent OS,在其他两个节点上有 Ubuntu,我可以在服务器上安装 Cloudera 4.5 或更高版本。

我在互联网上搜索过,但找不到任何相关信息。

如何在这 4 台服务器上安装 Cloudera?

0 投票
1 回答
806 浏览

hadoop - Cloudera Manager Installation failing

I am trying to create a small cluster for testing purposes on EC2 using Cloudera Manager 5.

These are the directions I am following, http://www.cloudera.com/content/cloudera-content/cloudera-docs/CM4Ent/4.7.1/Cloudera-Manager-Installation-Guide/cmig_install_on_EC2.html.

It is getting to the point where it executes, "Execute command SparkUploadJarServiceCommand on service spark" and it fails.

The error is "Upload Spark Jar failed on spark_master".

What is going wrong and how can I fix this?

Thanks for your help.

0 投票
1 回答
175 浏览

cloudera - CDH4 - 混合 64 位和 32 位机器

我有一个安装了 cloudera 管理器(CM)的 64 位机器的小型集群,它运行良好。我想向这个集群添加一组 32 位机器作为数据节点。根据 CM 文档,无法使用管理器安装 32 位机器。另一方面,我可以在这些 32 位机器上手动安装 CDH4。无论如何我可以将所有机器连接在一起吗?

0 投票
1 回答
1247 浏览

cloudera - 是否可以为 cloudera manager 构建包裹?

Cloudera manager 似乎建议使用 parcels 来管理 hadoop 集群。例如,我希望能够用蜂巢树干构建包裹。是否可以为 cloudera manager 构建包裹?

0 投票
2 回答
3215 浏览

cloudera-manager - 云时代管理代理启动失败

您好我正在使用云时代管理器 4.6 安装一个 6 节点集群我无法将主机添加到集群。我正在从具有 ip 192.168.xx 的系统运行云时代管理器服务器我想将此节点添加到我的集群.但是当我尝试时,我收到一条错误消息,例如“无法启动云时代管理器代理”,并且日志消息如下

我只需要确保 Cloudera-manager 代理在每个节点上运行,然后部署集群或注册节点。

网络配置文件中有一些错误,我已经修改了。还有

我可以通过确保云时代管理器代理在节点上运行来纠正这个问题。

谢谢

0 投票
1 回答
193 浏览

cloudera-manager - 哪个版本的CDH使用Cloudera Manager自动安装JDK1.7?

我将 Cloudera Manager 与 CDH4.2.2 一起用于我的 3+1 集群。在使用 cloudera manager 开始安装时,它会自动下载并安装 JDK1.6。为了方便起见,我想将 JDK1.7 与 CDH 一起使用。是否有可能或者是否有任何版本的 CDH 在集群中安装 Hadoop 时会自动下载并安装并成功运行 JDK1.7 的 Hadoop?

如果是,我可以知道它是哪个版本的 CDH,我可以从哪里下载它?

我想使用 JDK1.7 而不是 1.6,因为我想在 CDH 上安装 Apache Giraph,但 Giraph 似乎不适合 JDK1.6,需要 JDK1.7。

带着敬意,

0 投票
1 回答
652 浏览

cloudera - 在代理后面设置 Cloudera 快速入门

在我的组织中运行代理时,我无法让快速入门工作(在家里运行时它工作正常,所以我假设它是防火墙或更可能的代理)。

快速入门 Hue 加载但抱怨 oozie、Impala、Hbase(不胜枚举……)有问题。例如 Hbase 服务器“无法连接到 localhost:9000”。

它在 /var/ 中列出了一个用于配置的位置,但由于权限原因无法访问该位置。我还尝试设置允许沙箱连接到互联网的代理,但这会导致色调根本无法启动,而是挂起“加载”。我也尝试过使用 NAT 和桥接适配器

请帮忙