问题标签 [microsoft-distributed-file-system]

我在 Windows 2012 R2 上使用 DFS 复制。我使用“用于数据收集的复制组”选项创建了一个组。我的服务器 A“Master”上的文件夹“X”被复制到我的服务器 B“Slave”上的文件夹“X”。

我想创建另一个组，将我的服务器 B 上的我的文件夹“X”复制到我的服务器 A 上的文件夹“X”。这个组没有激活，只有当我需要更改我的服务器 A 并更改方式时从 B 到 A 的复制从 A 到 B。但它被拒绝，因为文件 X 被另一个组使用。

所以我认为最好的方法是通过 PowerShell 脚本进行更改，我想获取复制组并更改服务器源和服务器目标。

我找到了命令Get-DFSR...and Set-DFSR...，但我不知道如何使用它们来实现。

我正在尝试为 DFS 文件共享设置 DNS 友好名称。

DFS 共享如下所示：

我要创建的 DNS 条目如下所示：

这甚至可以做到吗？如果是这样，有哪些好的资源可以帮助实现这一目标？

我的 Hadoop 版本是 2.5.2。我正在更改主节点上 hdfs-site.xml 文件中的 dfs.blocksize。我有以下问题：

1）此更改是否会影响 HDFS 中的现有数据 2）我是否需要将此更改传播到 Hadoop 集群中的所有节点或仅在 NameNode 上就足够了

我的 java eclipse hadoop map reduce 程序显示无法找到输入文件的错误。我已使用 hadoop 命令通过终端将文件复制到 hadoop 目录。我可以在 java eclipse dfs 位置看到文件。并且还在终端中使用命令 hadoop dfs -ls 。当我创建一个普通文件夹（不是 hdfs）时，问题就解决了。但随后程序正在从本地文件系统访问文件。我已经在 32 位 redhat 服务器上安装了 hadoop 1.2.1，使用 java eclipse luna，我已经包含了 hadoop 插件和来自 hadoop 库的外部 jar 文件。输入和输出路径通过运行时参数给出

我正在尝试读取 HDFS 上的 Java 属性文件，如下所示：

但它似乎不起作用，我得到“找不到属性文件”。例外。如果我替换本地文件的路径，它可以正常工作并且我能够读取该文件。

是否可以使用 FileInputStream 读取 HDFS 文件？

谢谢！

这很奇怪。我有一个 ec2 实例（出于测试目的），我想要实现的是使用 powershell 安装 Windows 功能（DFS）并配置 DFS 复制组和其他东西。我能够安装此 Windows 功能，但配置失败。

我试图使用 Get-DfsrReplication 命令。 请注意，它不是 Get-DfsReplication，因为它也无法找到这样的命令

首先它失败了，因为我没有 powershell v4.0。我安装了同样的。然后是我没有 DFSR 模块的问题，我也这样做了。但它再次失败，出现了这样一个奇怪的错误：

名称的拼写，或者如果包含路径，请验证路径是否正确，然后重试。

Get-ADObject 和 Get-DfsrReplication 命令之间有什么联系？还是我做错了什么？

我正在尝试使用以下文档在 mesos 上设置 hadoop：

https://docs.mesosphere.com/tutorials/run-hadoop-on-mesos/

我在第 9 步遇到问题

我对这个概念还是陌生的。我必须使用本教程配置 mesos 集群：

https://www.digitalocean.com/community/tutorials/how-to-configure-a-production-ready-mesosphere-cluster-on-ubuntu-14-04

现在我在执行 dfs 命令时遇到错误：

我的 Hadoop 机器上有一些损坏的文件，我想将它们传输到另一台计算机上，看看里面有什么。

我试着做hadoop fsck -copyToLocal /dir1/ /dir2/。它什么也没给。当我做hadoop fs -copyToLocal /dir1/ /dir2/或hadoop dfs -copyToLocal /dir1/ /dir2/. 它写道：

我也试着做hadoop fsck -move。它会删除损坏的文件，但我找不到它们。

从 iis 7.5 开始（至少我知道这是可能的），我可以使用 dfs 共享（例如 \websiteshare\Mysite）作为 IIS 站点的物理位置。

例如，在网络农场环境中，我们有 2 或 3 台服务器，并且该站点是一个 CMS 系统，用于维护一些内容和文件。

选择 dfs share 作为物理位置的明显原因是，当编辑器上传文件时，它会随处可用。

我想知道这是否是个好主意？我一直认为 dfs 很慢，而且对于托管 IIS 站点并不是很好。

我正在尝试编写一个脚本来遍历我的 DFS 环境中的所有文件夹，如果文件夹名称为“Temp”，那么我希望脚本删除该文件夹中超过 5 天的所有文件。

这是我迄今为止没有太多运气的尝试。