您的位置:首页 > 运维架构

Hadoop学习笔记(4)——小案例测试

2014-11-08 13:21 141 查看
成功启动Hadoop后,我们用一个小例子来测试。

我们用Hadoop自带的统计单词个数的功能

1.创建需要被统计的文件test.txt并写进内容:

echo "hello world hello hadoop" > test.txt
2.在HDFS系统中创建一个input文件夹:

bin/hadoop fs -mkdir /home/用户名/input
3.将test.txt放入input文件夹

bin/hadoop fs -put test.txt /input
检查是否上传成功

bin/hadoop fs -ls /input
4.运行hadoop使用hadoop-example-1.0.3.jar中的统计单词个数功能

bin/hadoop jar hadoop-example-1.0.3.jar wordcount /home/用户名/input/test.txt /home/用户名/output


5.查看运行结果

bin/hadoop fs -text /home/用户名/output/part-r-00000


访问Hadoop WebUI

打开浏览器访问http://localhost:50070 可以查看整个分布式文件系统的状态

打开浏览器访问http://localhost:50030 可以查看JobTracker的运行状态
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签: