问题标签 [cloudera-manager]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
6 回答
17393 浏览

hadoop - HDFS 下复制块

我在我的“集群”上使用 Cloudera Manager 免费版,所有服务都在我的单台机器上。

我的机器充当数据节点、名称节点以及辅助名称节点。

HDFS 中与复制相关的设置,

我仍然得到复制不足的块,因此健康状况不佳,

Namenode 日志说,

我已经更改了值,已保存,已部署客户端配置,也已重新启动。还是一样。

我需要设置什么属性才能使 CM 读取复制因子1而不是3

0 投票
1 回答
286 浏览

jdbc - 使用 CDH4+Cloudera Manager 时 JDBC 驱动放在哪里?

我试图让 Sqoop2 (CDH 4.4.0) 识别 JDBC jar,但无论我将它们放在哪里,它们似乎都没有被识别。

我听从了建议:

  1. 在这里

  2. 在这里

  3. 并在这里问了一个类似的问题。

有人可以为此提供明确的答案吗?

0 投票
1 回答
1061 浏览

hadoop - Cloudera 管理器 - dfs.datanode.du.reserved 不工作

我已使用 Cloudera Manager 将 dfs.datanode.du.reserved 属性设置为 10 GB。但是当我检查 map-reduce job.xml 文件时,我发现 dfs.datanode.du.reserved 仍然设置为 0。如何验证属性是否设置?

PS:我正在使用 Cloudera Standard 4.7.2 和 CDH 4.4.0

0 投票
1 回答
398 浏览

postgresql - RHEL 5.7 中的 Cloudera Manager 安装问题

我们正在尝试在 RHEL 5.7 上安装 CDH 4.4。但是由于 Postgres DB 安装问题,安装被中止。

来自 /var/log/cloudera-manager-installer/4.install-cloudera-manager-server-db.log 的日志

请让我知道如何进一步进行。

0 投票
1 回答
2415 浏览

hadoop - Hadoop名称节点和日志节点自动占用磁盘空间

我是hadoop的新手。

我已经在 5 台服务器上使用 Cloudera(正常安装)安装了我的 hbase 设置。我创建了一些表格并填写了一些数据。

现在我监控了 hdfs 文件夹的大小。我可以看到数据节点一直在提供一致的读数。但是每次我检查时,我的名称节点和日志节点磁盘使用量都会增加。

虽然我有少量数据,但日志节点和名称节点每天增加 30MB(大约)。

我在配置中遗漏了什么吗?

0 投票
0 回答
134 浏览

amazon-ec2 - Cloudera Manager Express 向导未检测到 EC2

我正在尝试按照这些说明在 EC2 实例上安装 Cloudera Manager。他们指出,一旦我安装了 Manager 并导航到端口 7180 的 EC2 主机页面,它将自动检测到它正在 EC2 实例上运行,并允许我部署和配置我的 hadoop 集群。文档在欢迎屏幕上提到了与 EC2 相关的警告消息。相反,我得到了一个没有提及 EC2 的不同欢迎屏幕:

欢迎屏幕

当我单击继续时,我会看到第二个屏幕,我需要在其中输入现有主机的名称或 IP:

在此处输入图像描述

因此,快速向导似乎没有检测到它正在 EC2 上运行。有谁知道为什么会发生这种情况?

0 投票
1 回答
239 浏览

linux - 在企业云上使用 Cloudera Manager 设置 Hadoop

我有一个企业云环境,允许我创建 4 个具有相当高配置的虚拟机(如 16 Gig RAM 和 130 Gig 驱动器空间)。我正在尝试创建 Hadoop 集群并遇到问题。OS RHEL 6.4 在 130 gig 中,这是 df

我认为,当我开始安装包裹时,“/”和“/boot”会填满,cloudera manager 会卡住。

我尝试的解决方案之一是将 /tmp 移动到 /vol_01 下并使 /tmp 成为 /vol_01/tmp 的链接,它确实使情况稍微好一些……但随后 /var 占用了大量空间。我无法将 /var 移动到 /vol_01 下,因为它被操作系统使用(我猜......它无法从 /var 移动某些文件夹)。现在,这些挂载点是预定义的......作为图像的一部分。任何解决方案,我可以要求 Cloudera Manager 以不同方式安装或以特定方式修改我的虚拟机......?

我知道在将 /var 移动到 /vol_01/var 之前停止所有服务等解决方案,以便复制所有文件

  • lvextend -L +10G /dev/mapper/vg00-var
  • gnu分开
  • fstab

我将按照上述顺序找到最佳解决方案并发布结果。

0 投票
1 回答
4763 浏览

hadoop - Cloudera Manager 无法启动活动监视器

我从这里下载了 CDH 4.5 quick start vm 。在我打开“活动”选项卡查看 mapreduce 活动后,每个服务看起来都不错,除了以下错误:

尝试重新启动 Activity Monitor 服务后问题仍然存在,然后我在日志中发现以下错误消息。有人可以帮忙看看吗?

0 投票
1 回答
1462 浏览

postgresql - 无法启动 hive,hive-metastore-server 出现一些错误

我的蜂巢设置有问题。我没有设置它,所以我对这个系统的了解有限...... cloudera 管理器完成了自动更新,没有对 postgresql 数据库进行备份。Metastore 数据库正在使用 postgresql 设置。

据我了解,无法建立连接,但我不明白为什么以及如何修复它。我真的很感激一些提示如何通过 cloudera manager 管理解决这个问题。或任何提示如何重建元存储,或从 postgresql 切换到 mysql。

谢谢,大卫

这是堆栈跟踪:

SLF4J:类路径包含多个 SLF4J 绑定。SLF4J:在 [jar:file:/opt/cloudera/parcels/CDH-4.5.0-1.cdh4.5.0.p0.30/lib/zookeeper/lib/slf4j-log4j12-1.6.1.jar!/ org/slf4j/impl/StaticLoggerBinder.class] SLF4J:在 [jar:file:/opt/cloudera/parcels/CDH-4.5.0-1.cdh4.5.0.p0.30/lib/hive/lib/slf4j 中找到绑定-log4j12-1.6.1.jar!/org/slf4j/impl/StaticLoggerBinder.class] SLF4J:见http://www.slf4j.org/codes.html#multiple_bindings解释一下。javax.jdo.JDOFatalDataStoreException:致命:数据库系统在 org.datanucleus.api.jdo.JDOPersistenceManagerFactory.freezeConfiguration(JDOPersistenceManagerFactory.java: 781) 在 org.datanucleus.api.jdo.JDOPersistenceManagerFactory.getPersistenceManagerFactory(JDOPersistenceManagerFactory.java:195) 在 sun.reflect.NativeMethodAccessorImpl.invoke0(Native) 的 org.datanucleus.api.jdo.JDOPersistenceManagerFactory.createPersistenceManagerFactory(JDOPersistenceManagerFactory.java:326)方法)在 sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:39) 在 sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:

0 投票
2 回答
1913 浏览

hadoop - 无法在 Cloudera Manager 中启动 HBase

在我的设置中,由于电源中断,我的虚拟机在重新启动所有虚拟机后处于关闭状态,我无法启动 Hbase,所有其他服务都可以重新启动/停止/启动,但在 hbase 操作选项卡中的 CM 用户界面中,所有选项都被隐藏了。

以下是我的 hbase 主日志,现在它处于退出模式

感谢您的关注...