如何在Hadoop HDFS中导航目录

Question

我想在HDFS中导航

首先，我查看＆＃34; root＆＃34;中的目录。 HDFS

[cloudera@localhost ~]$ sudo -u hdfs hadoop fs -ls hdfs:/
Found 5 items
drwxr-xr-x   - hbase hbase               0 2015-10-10 07:03 hdfs:///hbase
drwxr-xr-x   - solr  solr                0 2014-06-01 16:16 hdfs:///solr
drwxrwxrwx   - hdfs  supergroup          0 2015-10-08 11:45 hdfs:///tmp
drwxr-xr-x   - hdfs  supergroup          0 2015-04-13 08:26 hdfs:///user
drwxr-xr-x   - hdfs  supergroup          0 2014-06-01 16:15 hdfs:///var

然后我尝试输入其中一个

[cloudera@localhost ~]$ sudo -u hdfs hadoop -cd hdfs:///hbase
Error: No command named `-cd' was found. Perhaps you meant `hadoop cd'

也尝试了'hadoop cd＆＃39;不工作

[cloudera@localhost ~]$ sudo -u hdfs hadoop cd hdfs:///hbase
Exception in thread "main" java.lang.NoClassDefFoundError: cd
Caused by: java.lang.ClassNotFoundException: cd
    at java.net.URLClassLoader$1.run(URLClassLoader.java:202)
    at java.security.AccessController.doPrivileged(Native Method)
    at java.net.URLClassLoader.findClass(URLClassLoader.java:190)
    at java.lang.ClassLoader.loadClass(ClassLoader.java:306)
    at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:301)
    at java.lang.ClassLoader.loadClass(ClassLoader.java:247)
Could not find the main class: cd.  Program will exit.

请不要使用-ls -R（递归）来显示所有文件。

我希望能够使用像cd

这样的命令进行导航

Answer 1

hdfs文件系统中没有cd（更改目录）命令。您只能列出目录并使用它们到达下一个目录。

您必须使用ls命令提供完整路径来手动导航。

hdfs dfs -ls /user/username/app1/subdir/

Answer 2

hadoop fs –ls /user/scott/

要查看路径中的值列表，我们必须提供完整路径。除了导航是不可能的。

Answer 3

针对cloudera psudo模式分发代码的指导 首先使用

       hadoop fs -ls 

命令 然后看目录让我们假设有输出文件夹 因此，使用此命令查看内部输出文件夹

       hadoop fs -ls ouput

Answer 4

您可以使用 UI 导航 http://:9870/explorer.html#/tmp 或者您可以登录 CDH UI，然后单击 NameNode URL 位置。