Hadoop学习笔记(4)——小案例测试
2014-11-08 13:21
141 查看
成功启动Hadoop后,我们用一个小例子来测试。
我们用Hadoop自带的统计单词个数的功能
1.创建需要被统计的文件test.txt并写进内容:
5.查看运行结果
访问Hadoop WebUI
打开浏览器访问http://localhost:50070 可以查看整个分布式文件系统的状态
打开浏览器访问http://localhost:50030 可以查看JobTracker的运行状态
我们用Hadoop自带的统计单词个数的功能
1.创建需要被统计的文件test.txt并写进内容:
echo "hello world hello hadoop" > test.txt2.在HDFS系统中创建一个input文件夹:
bin/hadoop fs -mkdir /home/用户名/input3.将test.txt放入input文件夹
bin/hadoop fs -put test.txt /input检查是否上传成功
bin/hadoop fs -ls /input4.运行hadoop使用hadoop-example-1.0.3.jar中的统计单词个数功能
bin/hadoop jar hadoop-example-1.0.3.jar wordcount /home/用户名/input/test.txt /home/用户名/output
5.查看运行结果
bin/hadoop fs -text /home/用户名/output/part-r-00000
访问Hadoop WebUI
打开浏览器访问http://localhost:50070 可以查看整个分布式文件系统的状态
打开浏览器访问http://localhost:50030 可以查看JobTracker的运行状态
相关文章推荐
- hadoop学习笔记4 在学习笔记3基础上增加案例测试
- Hadoop学习笔记—20.网站日志分析项目案例(二)数据清洗
- hadoop学习笔记(10)-HDFS I/O性能测试
- Hadoop学习笔记—20.网站日志分析项目案例(二)数据清洗
- 【Linux学习笔记】Hadoop_安装,单机测试,伪分布式
- Hadoop学习笔记—20.网站日志分析项目案例(二)数据清洗
- Hadoop学习笔记—20.网站日志分析项目案例(三)统计分析
- Hadoop学习笔记—20.网站日志分析项目案例(二)数据清洗
- 大数据测试学习笔记之hadoop家族
- Hadoop学习笔记3、Hadoop环境搭建及测试
- Hadoop学习笔记—20.网站日志分析项目案例(一)项目介绍
- hadoop学习笔记(一)——hadoop安装及测试
- Hadoop学习笔记—20.网站日志分析项目案例(三)统计分析
- Hadoop-HBASE案例分析-Hadoop学习笔记<二>
- hadoop学习笔记--8.MapReduce案例一:简单好友推介实现
- Hadoop 学习笔记 (八) hadoop2.2.0 测试环境部署 及两种启动方式
- Hadoop学习笔记—20.网站日志分析项目案例(三)统计分析
- Hadoop学习笔记—20.网站日志分析项目案例(一)项目介绍
- Hadoop学习笔记—20.网站日志分析项目案例(二)数据清洗
- Hadoop学习笔记—20.网站日志分析项目案例(二)数据清洗