问题标签 [apache-whirr]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
1 回答
73 浏览

amazon-web-services - AWS 实例是使用 Whirr 部署的。如何获取实例的密钥对?

我使用 Apache Whirr 自动运行 AWS 实例。然后我想用 ssh 连接到这个实例,我需要一个密钥对来连接。

我去了 AWS 控制台,发现为这个实例创建了新的密钥对。由于我使用 Whirr 自动部署它,因此无法下载 .pem 文件。

现在有什么方法可以获取密钥对吗?有没有办法将 Whirr 指向特定的密钥对来创建实例?

谢谢你。

0 投票
1 回答
516 浏览

hadoop - 有没有办法创建一个自动缩放的 Hadoop Hbase 集群

我为我的网络服务器使用了 aws 自动缩放,为 hadoop habse 集群使用了 Apache whirr。Apache whirr 是否具有自动缩放属性。

0 投票
1 回答
81 浏览

hadoop - whirr 无法连接到自定义 AMI - EC2

嗨,我正在尝试使用 whirr 在 EC2 上进行 Hadoop 部署。如果我使用公开可用的 Ubuntu AMI 之一,我的集群将被部署并且一切运行良好。但是,如果我使用自己的自定义 RHEL AMI,那么我的启动会因为 ssh 而失败。这是我所知道的情况。Whirr 创建一个新的密钥对并使用它来登录实例。但是 ssh 进入实例失败。这告诉我新实例的设置有问题。我将不胜感激。

0 投票
4 回答
96 浏览

git - 如果我未能创建功能分支,如何从 github 存储库中创建补丁?

我在 Github 上 fork/clone apache whirr,并开始在主干分支上工作。在工作期间,我从 origin/trunk 中提取了两个提交。当我通过运行 git diff first_feature_commit HEAD 生成补丁时,我得到一个包含这两个提交的补丁。因此,当我提交补丁时,该补丁被拒绝了。

如何在没有从源/主干中提取的提交的情况下创建补丁?

0 投票
0 回答
168 浏览

hadoop - Whirr:hadoop-proxy.sh 不工作

我已经安装了 Whirr 并创建了一个 EC2 集群。集群创建正确,我可以 ssh 到节点并检查 Hadoop 是否正常工作。但是,每当我尝试使用 hadoop-proxy.sh 时,都会收到以下消息:

如果我尝试在不同的 shell 中查看 HDFS(我之前配置了 HADOOP_CONF_DIR 变量),我会收到以下错误:

我在设置集群时尝试了不同的属性文件,使用 CDH,但不使用它......但我仍然遇到同样的错误。这是我目前用来启动带有 Whirr 的集群的属性文件:

我是 Whirr 的新手,我想我错过了一些东西......但我不知道如何解决这个问题。任何帮助将非常感激。提前致谢。

0 投票
1 回答
107 浏览

apache - EC2上的apache hama通过whirr 0.8

我正在尝试查看 Apache Hama,并按照http://hama.apache.org/hama_on_clouds.html中的说明下载了 whirr 0.8.2 但在此版本中没有任何 hama-ec2.properties文件夹食谱,因此我无法尝试。

在此版本中删除此文件是否有原因,并且有另一种方法可以通过 EC2 上的 whirr 尝试 hama。

谢谢你的帮助

0 投票
3 回答
601 浏览

amazon-web-services - Aazon EC2 中的纱线

我正在尝试在 Amazon EC2 中使用 whirr 配置 Yarn 2.2.0。但是我遇到了一些问题。我已经修改了 whirr 服务以支持 yarn 2.2.0。结果,我能够启动作业并成功运行它们。但是我在跟踪工作进度方面遇到了问题。

我试过 Debugginh 问题出在 ApplicationMaster 上。它有一个主机名和 rpc 端口,其中主机名是内部主机名,只能从亚马逊网络内解析。理想情况下,它应该是一个公开的 Amazon DN 名称。但是我还不能设置它。我尝试设置参数,例如

yarn.nodemanager.hostname yarn.nodemanager.address

但我找不到 ApplicationMaster 的主机名或端口有任何变化,它们仍然是亚马逊私有的内部主机名。我有什么遗漏吗。或者我应该更改所有节点管理器节点中的 /etc/hosts 以便节点管理器从公共地址开始。但这将是一个矫枉过正的权利。或者有什么方法可以配置 ApplicationMaster 以获取公共 IP。所以我可以远程跟踪进度

我这样做是因为我需要远程提交作业。我不愿意妥协这个功能。任何指导我的人

我成功配置了历史服务器,然后我可以从远程客户端访问。我使用配置来做到这一点。

mapreduce.jobhistory.webapp.address

当我调试时,我发现

由于私有地址,代理无法连接。上面的代码片段来自 ClientServiceDelegate

0 投票
1 回答
80 浏览

amazon-ec2 - 无法在 ec2 上启动 - describeAvailabilityZonesInRegion(未知来源)

下面是我的属性文件和错误。我该如何解决?谢谢

以下是我的错误:

0 投票
1 回答
282 浏览

amazon-s3 - 使用 Whirr 启动 Druid 集群

我正在尝试按照德鲁伊网站http://druid.io/docs/latest/Booting-a-production-cluster.html中的步骤使用 Whirr 启动德鲁伊集群

集群实例化了,但是不同的Druid节点(overlord、middleManager、history和coordinator)下载一些依赖导致失败有如下错误

无法在 io.druid.extensions:druid-s3-extensions:jar:0.6.115 收集依赖项

有没有人遇到过类似的问题或知道如何解决?