64

是否有 hdfs 命令可以查看 hdfs 中的可用空间。我们可以通过浏览器中的 master:hdfsport 中的浏览器看到这一点,但由于某种原因,我无法访问它,我需要一些命令。我可以通过命令 ./bin/hadoop fs -du -h 查看我的磁盘使用情况,但看不到可用空间。

感谢您提前回答。

4

4 回答 4

96

试试这个:

hdfs dfsadmin -report

对于旧版本的 Hadoop,试试这个:

hadoop dfsadmin -report
于 2012-07-20T16:42:09.230 回答
15

方法

1.dfsadmin

在较新版本的 HDFS 中,不推荐使用 dfsadmin 的 hadoop CLI:

$ sudo -u hdfs hadoop dfsadmin -report
DEPRECATED: Use of this script to execute hdfs command is deprecated.
Instead use the hdfs command for it.

所以你应该只hdfs在这一点上使用。此外,在sudo需要的系统上,您可以像这样运行它:

$ sudo -u hdfs hdfs dfsadmin -report
2. fs -df

您还可以通过fs模块使用其他方法hadoop

$ hadoop fs -df -h

示例输出

管理员

此外,为了提供更全面的答案,这里是单节点安装的输出。

$ sudo -u hdfs hdfs dfsadmin -report
Configured Capacity: 7504658432 (6.99 GB)
Present Capacity: 527142912 (502.72 MB)
DFS Remaining: 36921344 (35.21 MB)
DFS Used: 490221568 (467.51 MB)
DFS Used%: 93.00%
Under replicated blocks: 128
Blocks with corrupt replicas: 0
Missing blocks: 0
Missing blocks (with replication factor 1): 0

-------------------------------------------------
Live datanodes (1):

Name: 192.168.114.48:50010 (host-192-168-114-48.td.local)
Hostname: host-192-168-114-48.td.local
Decommission Status : Normal
Configured Capacity: 7504658432 (6.99 GB)
DFS Used: 490221568 (467.51 MB)
Non DFS Used: 6977515520 (6.50 GB)
DFS Remaining: 36921344 (35.21 MB)
DFS Used%: 6.53%
DFS Remaining%: 0.49%
Configured Cache Capacity: 0 (0 B)
Cache Used: 0 (0 B)
Cache Remaining: 0 (0 B)
Cache Used%: 100.00%
Cache Remaining%: 0.00%
Xceivers: 2
Last contact: Thu Feb 04 13:35:04 EST 2016

在上面的示例中,HDFS 硬盘空间已被 100% 使用。

fs -df

-df与模块中的子命令相同的系统fs

$ hadoop fs -df -h
Filesystem                                 Size     Used  Available  Use%
hdfs://host-192-168-114-48.td.local:8020  7.0 G  467.5 M     18.3 M    7%
于 2016-02-04T18:38:49.637 回答
3

Hadoop版本1:

hadoop fs -df -h

或者

hadoop dfsadmin -report

Hadoop 版本 2:

hdfs dfs -df -h

或者

hadoop dfsadmin -report
于 2016-09-04T10:05:16.890 回答
1

试试这个命令:

hdfs dfsadmin -report
于 2020-01-25T12:57:23.617 回答