我学会了通过命令行界面创建工作流程。我正在使用亚马逊弹性 mapreduce cli 来创建和运行作业流程。我的疑问是，我想在创建的作业流创建时使用引导操作将我的源文件从 s3 存储桶放入主节点。我在交互模式下使用 Pig Program 来运行我的工作流程。

我阅读了有关引导操作的文档，但这些事情对我来说并不清楚。

提前谢谢谁能告诉我如何使用引导操作将我的文件从 s3 存储桶复制到主节点。

我是 ganglia 的新手，正在尝试为我的项目使用 gmetad 集群

我有一个大约 500 个节点的集群，因此我想将 gmetad（聚合器）的负载分配到多个节点，然后使用中央 gmetad /gweb 来显示所有结果。

另外，我有一个限制，我不能在一台机器上拥有来自所有节点的所有数据，所以我想知道是否有类似下面的选项，

1. 如果我配置 gmetad 集群，我的中央 gmetad 是否会包含来自所有其他 gmetad 的 rrd(central) 中的数据？
2. 是否可以将数据实时流式传输到中央 gmetad 以供 gweb 显示而不是将其存储在 rrd 中？

请在下面找到示例配置，

中央配置

grid1 配置

我已经尝试使用上述配置并且能够在 Web 上查看数据，但是来自所有 gmetad 的数据都被复制到中央 gmetad。

提前致谢

今天我尝试在 apache 服务器上为 gweb 启用身份验证。单击右上角的注销链接后，我成功通过了身份验证，但无法注销。如果有人遇到同样的问题，请帮助解决这个问题，

认证配置

在 httpd.conf

按照配置将 .htpasswd 放置在适当的位置。

在 conf.php - gweb

我有兴趣监视我的多代理 apache 水槽设置。我启用了内置的神经节服务器，它通过 JSON 数据为我提供水槽指标。现在我有兴趣在图形/图表中查看这些信息。为了实现这一点，我正在使用 ganglia web ui，我有这些问题 - 我是否必须安装 gmond 和 gmetad 才能实现它，如果不是，那么我将如何将现有的 ganglia 信息与 ganglia web ui 一起使用？

提前致谢。

我在 Ubuntu 上有 Ganglia 服务器，在 CentOS 客户端上有 Ganglia 客户端（gmond）。客户端机器的指标不会出现在 UI 上

当我尝试在客户端重新启动 gmond 服务时，出现错误：

/var/log/messages 还会报告：

我已经设置了 Ganglia（Ganglia Core 3.6.0 和 Ganglia Web 3.5.10）来监控我的集群。

当 gmond 在机器中重新启动时，来自所有其他 gmond 机器的指标也会停止，即我无法在 Ganglia Web 中看到其他机器发布的指标。而且我还可以看到主机上升到 0，主机下降到 13（机器总数）。随着时间的推移，Hosts up 回到 13。

我错过了什么吗？有人能帮我吗...

我正在使用 Ganglia UI 来监控一堆分布式集群。除默认图（负载、内存、cpu 和网络）外，所有图均正常工作。Ganglia gmond 不会将这些信息存储在 rrd 中。这是我在启动 gmond 服务时遇到的错误。 Cannot load /location/ganglia-install/lib64/ganglia/modcpu.so metric module: location/ganglia-install/lib64/ganglia/modcpu.so: undefined symbol: timediff

早些时候我使用 Ganglia 来监控一堆节点，但现在我们正在转向 Graphite，并将使用 RRDtool 作为我们的存储引擎。我已经从源代码构建了所有与石墨相关的文件，并且可以启动碳和石墨守护程序。但是如何在 ui 上查看这些图表？

This is in the context of a small data-center setup where the number of servers to be monitored are only in double-digits and may grow only slowly to few hundreds (if at all). I am a ganglia newbie and have just completed setting up a small ganglia test bed (and have been reading and playing with it). The couple of things I realise -

• gmetad supports interactive queries on port 8652 using which I can get metric data subsets - say data of particular metric family in a specific cluster
• gmond seems to always return the whole dump of data for all metrics from all nodes in a cluster (on doing 'netcat host 8649')

In my setup, I dont want to use gmetad or RRD. I want to directly fetch data from the multiple gmond clusters and store it in a single data-store. There are couple of reasons to not use gmetad and RRD -

• I dont want multiple data-stores in the whole setup. I can have one dedicated machine to fetch data from the multiple, few clusters and store them
• I dont plan to use gweb as the data front end. The data from ganglia will be fed into a different monitoring tool altogether. With this setup, I want to eliminate the latency that another layer of gmetad could add. That is, gmetad polls say every minute and my management tool polls gmetad every minute will add 2 minutes delay which I feel is unnecessary for a relatively small/medium sized setup

There are couple of problems in the approach for which I need help -

• I cannot get filtered data from gmond. Is there some plugin that can help me fetch individual metric/metric-group information from gmond (since different metrics are collected in different intervals)
• gmond output is very verbose text. Is there some other (hopefully binary) format that I can configure for export?
• Is my idea of eliminating gmetad/RRD completely a very bad idea? Has anyone tried this approach before? What should I be careful of, in doing so from a data collection standpoint.

Thanks in advance.

我部署了 hadoop 2 (HDP2)，并且想获取我在 ganglia 中的从节点的磁盘 i/o 指标。到目前为止，我没有找到任何相关的指标。

您建议使用或添加到 ganglia 什么指标？

谢谢