问题标签 [ambari]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
2 回答
2605 浏览

hadoop - YARN 上的 Oozie - 不允许 oozie 模拟 hadoop

我正在尝试使用 Java 中的 Oozie 在 Hadoop 集群上开始工作。我在 Hadoop 1 上使用 Oozie 的经验非常有限,现在我正在努力在 YARN 上尝试同样的事情。

我得到了一台不属于集群的机器,所以当我尝试开始我的工作时,我得到了以下异常:

为什么会这样,该怎么办?

我读了一些关于需要设置的核心站点属性

似乎这是问题所在?我应该联系负责集群的人来解决这个问题吗?

会不会有问题,因为我对 YARN 使用与 Hadoop 1 相同的代码?应该改变什么吗?比如我在workflow.xml中设置了nameNode和jobTracker,既然现在有ResourceManager,jobTracker应该存在吗?我设置了ResourceManager的地址,但是属性名却是jobTracker,会不会是错误?

也许我还应该提到使用了 Ambari ......

0 投票
1 回答
114 浏览

spring-xd - 使用 Ambari 插件升级 Spring XD 的步骤是什么?

我使用 Ambari 插件在 HDP 2.2 上成功安装了 Spring XD 1.2.0 RC1。现在 Spring XD 1.2.0 GA 已经发布,我该如何升级我的安装?

0 投票
4 回答
19610 浏览

hadoop - ambari hadoop 安装期间权限被拒绝(公钥、gssapi-keyex、gssapi-with-mic、密码)

我正在尝试使用 ambari 部署 hadoop 集群,但是当我选择具有 FQDN 的主机名并继续配置时,我收到 ssh 的权限被拒绝错误。

步骤: 1. 使用 ssh-keygen 作为 root 生成 rsa 密钥。

  1. 更改了 .ssh(700) 和 authorized_keys(640) 的权限
  2. cat 到authorized_keys 的公钥。
  3. 并将公钥复制到所有主机(authorized_keys)并如上所述更改文件权限。
  4. 我可以从 ambari 服务器主机无密码 ssh 到所有其他主机。

但是来自 ambari 的 hadoop 安装失败并出现以下错误。

请不要将此问题标记为重复。我可以看到其他具有相同描述的问题,但没有一个提到 Ambari ssh 权限被拒绝错误。

0 投票
1 回答
683 浏览

hadoop - HDP集群如何定义磁盘分区?

在安装 HDP 集群时,我尝试使用 Hortonworks 的最佳实践来定义磁盘分区,过程如下:documentation

我正在使用 Ambari 2.0 来安装我的堆栈。Hadoop 默认安装路径是/hadoop/xxx. 有没有办法告诉 Ambari 使用上面链接中的最佳实践而不是/hadoop?如果不是,最好的手动方式是什么?

0 投票
1 回答
621 浏览

hadoop - 如何在没有 HDP 的情况下使用 ambari 集成 hadoop?

我有一个带有 apache hadoop 2.0.7 的 hadoop 集群。

我想知道如何在没有 HDP(HortonWorks)的情况下将 Ambari 与 apache hadoop 集成。

实际上,如果我使用 HDP,解决方案很简单。但是,我不想在我的情况下使用。

你有什么想法吗?

0 投票
1 回答
921 浏览

hadoop - 从 ambari manager 获取 core-site 和 hdfs-site 的位置

我需要能够找到 Ambari 管理器正在使用的 core-site.xml 和 hdfs-site.xml 的位置。

我最初的想法是查询 Ambari API 来执行此操作,但我找不到任何将返回这两个文件中的任何一个的路径的端点。

谁能指出我正确的方向?我一直在通过 Ambari 文档和谷歌搜索无济于事。

提前致谢!!

~画了

0 投票
1 回答
539 浏览

hortonworks-data-platform - Ambari 版本选项卡不显示任何内容

我对 Hadoop 比较陌生,并且一直在尝试为我参与的项目(CentOS 6.5 是操作系统)设置开发环境。我最初使用 Ambari 1.7 设置环境并安装 Hortonworks Data Platform 版本 HDP-2.2.0.0-2041。

现在,我正在尝试升级到 Ambari 2.0.1 和 HDP-2.2.6.0。

Ambari 升级完全没有问题。我还可以通过 Ambari 管理版本页面注册新版本的 HDP。一切都很顺利。

问题是当我尝试完成升级时。说明说从管理菜单转到“堆栈和版本”,然后是“版本”选项卡。在那里,我应该看到我的注册版本和完成升级的链接。但是,我得到的只是一个空白页。

仅供参考,我尝试了多个浏览器来排除浏览器问题。我尝试了 Firefox 和 Opera。(我听说 CentOS 不再支持 Chrome,所以没有尝试)。

任何人都知道为什么这个页面只是空白和/或我该如何修复它?

谢谢!汤姆

顺便说一句,我试图发布图片,但我没有足够的声望点,所以我不能。您必须相信我的话,管理版本显示的是正确的版本,但堆栈和版本下的版本选项卡是完全空白的。

0 投票
2 回答
2612 浏览

rest - 如何检索 ambari 集群 HDFS 磁盘使用指标

我正在尝试检索 ambari UI 指标,如果有人知道请回复。

例如,如果我调用下面的 Rest API,我会在 JSON 中获得 ambari 指标:

其中 Metrics Name 可以是:cpu、network、memory、load ..

  • cpu : 查看集群的 cpu 利用率
  • network : 查看集群的网络利用率
  • memory :查看集群的内存利用率
  • load :查看集群的负载利用率

例如 :

如果我调用以上 Rest API,我将以 JSON 格式获取网络使用数据。

与上面相同,我想如何检索HDFS DISK USAGE METRICS DATA,如果有人知道,请帮助我。

0 投票
1 回答
233 浏览

python - Ambari1.7 Hadoop 3.0 集群 Ganglia 监视器安装在 centos 6.X 上失败

我们正在尝试使用 ambari 代理 python 脚本在 hadoop 集群节点上安装 ganglia 服务。

收到以下错误:

详细错误:

任何帮助将非常感激

0 投票
1 回答
5194 浏览

hadoop - 运行 hive 作业时,yarn 正在使用 100% 的资源

我正在运行 hive tez 工作。工作是将数据从一个文本文件格式的表加载到另一个兽人格式的表中。

我在用着

当我通过 ambari Web 控制台监控作业时,我看到 YARN 内存使用率为 100%。

你能建议如何保持健康的纱线记忆吗?

所有三个数据节点的平均负载;

这些是纱线配置

仅供参考:- 我的集群配置

如何减少纱线利用率记忆?