查看HDFS文件系统数据的三种方法详解大数据

1、使用插件——Hadoop-Eclipse-Plugin
此方法需要借助Eclipse,插件的安装及使用请参考博文
借助Eclipse只能进行简单的HDFS操作,如查看,删除,上传,下载。以下是操作界面:
插件界面
2、HDFS Web界面
HDFS Web界面上只能查看文件系统数据。网址:http://localhost:50070
界面如下:
web界面
执行完WordCount程序后可以到本界面上下载output结果并查看,截图有误,理解就好,如图:
Hadoop web界面查看文件系统数据
3、 shell命令
这个方法是最基本的,能进行所有文件操作。

hadoop fs -ls /user/hadoop/output #查看指定目录下的文件和文件夹。/user/hadoop/output是HDFS上的目录,不是本地目录 
hadoop fs -cat  /user/hadoop/output #查看文件内容

博主的用户名是dblab,相应的HDFS上的目录变为/user/dblab/output。界面截图如下:
shell

原创文章,作者:奋斗,如若转载,请注明出处:https://blog.ytso.com/9169.html

(0)
上一篇 2021年7月19日
下一篇 2021年7月19日

相关推荐

发表回复

登录后才能评论