问题标签 [namenode]

无法启动备用名称节点。我已经从官方文档中验证了我的配置。

我正在学习 hadoop，在学习时我对两个术语感到困惑，一个是命名空间，第二个是元数据。

到目前为止，我对元数据的研究是元数据是名称节点服务器的一部分。它关于 HDFS 中文件的所有信息、复制因子、datanode 的数据块、文件权限等。这些元数据存储在一个名为 fsimage 的文件中。如果错了请纠正我

其次是命名空间，关于命名空间是我唯一知道的是它只是一个文件夹结构，甚至不确定。你们能准确地与我分享这些术语吗？我对命名空间本身这个词感到困惑..!!

以及它在 Hadoop 系统中的外观以及如果我想在我安装了 hadoop 的本地机器上看到这两个术语，我可以在哪里看到？

在启动辅助名称节点时，它在加载 Inode 时卡住了。在辅助名称节点上发生了很多 GC，但它并没有超越这一点。

SNN 设置为 CMS gc，我也尝试将其更改为 G1GC，但 gc 仍然在 gcs 中继续使用大约 99% 的时间。对此的任何帮助都会非常有帮助。

我在 Ubuntu 上安装了 Hadoop，但是当我在 sbin 文件夹中运行 ./start-all.sh 脚本时，DataNode 和 Namenode 没有启动。我在配置文件中有以下设置：

核心站点.xml

hdfs-site.xml

mapred-site.xml

纱线站点.xml

你能帮我在xml文件中添加任何其他信息吗？我不知道这里有什么问题？

最近我正在使用 S3 在 Object Store 上设置我的 Hadoop 集群，所有数据文件都存储在 S3 而不是 HDFS 中，并且我在 S3 上成功运行了 spark 和 MP，所以我想知道我的 namenode 是否仍然需要，如果是，那是什么当我在 S3 上运行 hadoop 应用程序时，我的 namenode 会做什么？谢谢。

我正在尝试使用 hadoop ha 设置 hbase ha。我已经完成了 hadoop ha setup 的设置并对其进行了测试。

但是在 hbase 设置中，在启动时，我收到以下错误

我认为我的 hbase 设置无法识别我的名称服务 hdfs-nameservice。

我正在使用 Hbase 1.2.4 和 Hadoop 2.7.3。

我的 hbase-site.xml 有

core-site.xml 有

和 hdfs-site.xml 有

试过： 1. 复制了 hbase conf 目录中的 core 和 hdfs-site xmls。2. 在环境变量和 hbase-env.sh 中添加 Hadoop conf 路径

仍然无法弄清楚如何让我的 hbase 识别 hdfs-nameservice。

任何帮助将非常感激。

我无法删除 HDFS 中存在的损坏文件。Namenode 已进入安全模式。区块总数为 980 个，其中 978 个已报告。当我运行以下命令时，

生成的报告是，

对于执行时的以下命令，

输出是，

任何人都可以帮助纠正损坏的块，（或）删除它们吗？提前致谢。

我正在尝试在 Windows 机器上安装 Hadoop，中间出现以下错误。

日志

名称节点是否可以执行任务？默认情况下，任务在集群的数据节点上执行。

我正在使用一个系统，该系统使用一个默认的 Hadoop 名称节点在 YARN 上运行 Spark 作业。最近，我在我的系统中添加了另一个 Hadoop 名称节点。我现在希望 Spark 作业从默认名称节点读取输入数据并将输出写入第二个。如何在 Spark 作业中配置或指定路径？我尝试将hdfs路径放到代码中，例如：

但它抛出了异常：

而且根本没有结果:(