问题标签 [bigtop]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
2 回答
2030 浏览

apache - Oozie 设置不起作用

Apache Bigtop 的另一个问题。这次是oozie。

每当我想对 Oozie 做某事时,都会遇到以下异常:

我做了一些 google-fuu 并遇到了他们官方提供的教程。

但万岁,下一个问题:

每当我进入

我收到以下回复:

我尝试过很多安静的事情。我从存档下载了一个 ext-2.2.zip 版本。我下载了2.3.0版本。但无论我做什么,回复都是一样的。请帮我让 Oozie 运行。我现在非常需要它!

0 投票
1 回答
189 浏览

linux - Linux Centos6 VM 如何下载bigtop?

我是这个主题的新手。我一直在遵循 Hadoop for Dummies 书中的指示。在第 2 步尝试安装 bigtop 时,在下面出现此错误。 在此处输入图像描述

操作系统:Windows 8 虚拟机:Centos6

0 投票
1 回答
305 浏览

linux - Bigtop (centos) 中缺少 hadoop 包 - 安装问题

我正在尝试在 centos6 上安装 bigtop(使用 virtualbox 的 VM)。我正在关注下面给出的链接,几乎没有修改以获得最新版本(bigtop 1.1.0) -

http://www.dummies.com/how-to/content/set-up-the-hadoop-environment-with-apache-bigtop.html https://cwiki.apache.org/confluence/display/BIGTOP/How +to+install+Hadoop+distribution+from+Bigtop+0.5.0

确切地说,到目前为止,我已经运行了以下命令-

现在的问题是,它说——

我是 linux 新手,并不完全理解这些命令到底在做什么。我在这上面浪费了一整天。因为我只是想在我的虚拟机上探索 hadoop,如果我也能获得一些旧版本的 bigtop,我很好,但我更希望我能获得至少 hadoop 2.0 或更高版本。

有人可以帮忙吗?

谢谢。

0 投票
1 回答
67 浏览

linux - BigTop 回购服务器 403 错误

我目前正在尝试在我的 fedora17 机器上安装 BigTop,但我遇到了一个问题,我不知道出了什么问题。

我按照https://cwiki.apache.org/confluence/display/BIGTOP/How+to+install+Hadoop+distribution+from+Bigtop+0.5.0上的步骤操作, 但是当我尝试更新我的包或搜索特定的包裹我得到一个 403。有谁知道出了什么问题?

在此处输入图像描述

0 投票
1 回答
1124 浏览

hadoop - RHEL 7 上的 Apache Bigtop 安装

我正在寻求一些帮助,我的任务是在工作中建立一个 Hadoop 集群。我已经在家里的笔记本电脑上使用开源堆栈完成了单节点的工作(我试图坚持使用开源的 Apache 堆栈以避免任何许可成本。现在我们对 Cloudera 或 HortonWorks 没有兴趣。)。

我遇到了 Apache BigTop 堆栈 (1.2.0) 并在那里闲逛。现在我仍在试图围绕它提供的内容(我还没有找到对 Hadoop/Spark 版本等的参考)。我可以在以下方面获得一些帮助:

  1. 1.2.0版本提供了哪些Hadoop/Spark/其他工具?

  2. 在 RHEL 7 下从头开始安装完整的 Hadoop/Spark 集群是否有很好的参考?我有 12 台服务器,我计划做 2 个名称节点和 10 个数据节点。BigTop 适合这个,还是我应该只安装每个包并手动配置?

  3. 我发现了以下内容:

https://cwiki.apache.org/confluence/display/BIGTOP/How+to+install+Hadoop+distribution+from+Bigtop+1.2.0

这看起来很有希望,但它适用于 CentOS 7,我知道它是相似的,但并不完全相同。有人可以建议我如何修改它以在 RHEL 7 下工作吗?我找到了 repos,但没有找到 RHEL....

  1. Apache 官方页面上的文档似乎很薄,或者我只是没有找到正确的位置......是否有很好的链接可以指向完整的集群安装的参考资料?

感谢所有可以提供帮助的人,我真的很感激!

0 投票
1 回答
531 浏览

ruby - BigTop docker-hadoop.sh 无法启动

我正在使用 BigTop 1.2.0,vagrant 配置器运行良好,但是当我尝试使用 Docker 配置器时,显示以下错误:

命令

$ ./docker-hadoop.sh -c 3

错误

环境检查... 检查 docker:Docker 版本 17.09.0-ce,构建 afdb6d4 检查 docker-compose:docker-compose 版本 1.16.1,构建 6d1ac219 检查 ruby​​:ruby 2.4.2p198(2017-09-14 修订版 59899)[ x64-mingw32] -e:1:in <main>': undefined method[]' for nil:NilClass (NoMethodError) -e:1:in <main>': undefined method[]' for nil:NilClass (NoMethodError) 不推荐使用 scale 命令。请改用带有 --scale 标志的 up 命令。创建 20171020215450r21863_bigtop_1 ... 创建 20171020215450r21863_bigtop_2 ... 创建 20171020215450r21863_bigtop_3 ...

错误:未提供 20171020215450r21863_bigtop_2 资源 ID 错误:未提供 20171020215450r21863_bigtop_3 资源 ID 错误:未提供 20171020215450r21863_bigtop_1 资源 ID

回溯(最近一次调用最后):
文件“docker-compose”,第 6 行,在
文件“compose\cli\main.py”中,第 68 行,在主
文件中“compose\cli\main.py”,第 121 行,在perform_command
文件“compose\cli\main.py”,第 796 行,按比例
文件“compose\service.py”,第 257 行,按比例 文件“compose\service.py”,第 444 行,在 _execute_convergence_start 文件“compose\service .py”,第 395 行,在 _execute_convergence_create 文件“compose\parallel.py”,第 70 行,在 parallel_execute docker.errors.NullResource:未提供资源 ID 无法执行脚本 docker-compose Docker 容器启动失败!

提前致谢。

0 投票
0 回答
156 浏览

hadoop - Hiveserver2 没有出现在 bigtop hadoop 中

我们正在构建一个带有 hive 和 hbase + kerberos 的 vanilla hadoop 2.7.3 集群。我们正在使用 hadoop 的 bigtop repo 来简化它。

部署脚本成功安装了 hive 和组件,但即使我们运行了 metastore 和 hiveserver,

  • 它没有使用 10000 端口,
  • 我们无法连接到直线。
  • 没有错误
  • 它甚至没有创建 hiveserver2.log 文件。

ps -ef | grep hive 显示以下输出

连接直线

蜂巢站点.xml

任何帮助将非常感激。

0 投票
1 回答
37 浏览

gradle - “./gradlew {package}-rpm”之后会发生什么

我是 bigtop 架构的新手,我想知道 bigtop 是如何知道要在这个特定package之后启动的真正构建命令的./gradlew {package}-rpm,我假设必须有某种配置定义真正的构建命令。(这package是一个基于 Maven 的项目)

谢谢你。

0 投票
1 回答
883 浏览

hadoop - 是否可以使用 Ambari 安装 Apache Bigtop Stack

任何人都可以提供使用 Ambari 安装 Apache BigTop 堆栈的教程或步骤。

我试图学习以下信息

https://cwiki.apache.org/confluence/display/BIGTOP/Bigtop+1.3.0+Release

但是使用 amabri 安装每个 hadoop 组件的步骤是什么

我不想使用 HDP 堆栈安装。

0 投票
3 回答
1141 浏览

hadoop - 我们如何使用 Ambari 安装 Apache BigTop?

我正在尝试通过使用 apache big top 了解如何使用 ambari 部署 hadoop 集群

根据最新发布的 bigtop 1.5: https ://blogs.apache.org/bigtop/

我的理解是 Bigtop Mpack 是作为一项新功能添加的,它使用户能够通过 Apache Ambari 部署 Bigtop 组件。

我可以通过命令行安装 Bigtop 组件,但没有找到任何关于如何通过 ambari 安装这些 bigtop hadoop 组件的文档。

有人可以帮我重定向到一些文档,告诉我如何通过 ambari 安装各种 hadoop 组件(bigtop 包)吗?

谢谢,