Hadoop上路_05-HDFS中的文件操作
2016-02-16 14:47
253 查看
目录[-]
1.Hadoop操作:
1)查看Hadoop版本:
2)自动开启Hadoop:
3)手动开启Hadoop:
2.HDFS操作:
1)查看HDFS上的文件:
2)向HDFS上传文件:
3)从HDFS下载文件:
4)删除HDFS上的文件:
5)HDFS的更多命令:
3.MapReduce示例操作-统计字符
1)在HDFS上执行jar程序:
2)查看统计结果:
![](http://static.oschina.net/uploads/space/2013/0520/220316_FC0a_256028.png)
?
![](http://static.oschina.net/uploads/space/2013/0520/220426_M8A2_256028.png)
?
![](http://static.oschina.net/uploads/space/2013/0520/220441_C7Fx_256028.png)
(1)使用put命令:
?
![](http://static.oschina.net/uploads/space/2013/0520/221327_YDmo_256028.png)
(2)使用copyFromLocal命令:
?
![](http://static.oschina.net/uploads/space/2013/0520/221338_5EjS_256028.png)
?
(1)拷贝单个文件:
![](http://static.oschina.net/uploads/space/2013/0520/221404_QTHz_256028.png)
(2)拷贝整个目录:
![](http://static.oschina.net/uploads/space/2013/0520/221415_HcZZ_256028.png)
![](http://static.oschina.net/uploads/space/2013/0520/221507_Ga7D_256028.png)
红色方框选中的hadoop-hm目录是之前我们在core-site.xml文件中配置的临时目录。红色椭圆选中的home是刚刚我们congHDFS下载的文件夹。
![](http://static.oschina.net/uploads/space/2013/0520/221525_H7gm_256028.png)
?
![](http://static.oschina.net/uploads/space/2013/0520/221854_VO6R_256028.png)
![](http://static.oschina.net/uploads/space/2013/0520/222707_ccjk_256028.png)
![](http://static.oschina.net/uploads/space/2013/0520/222246_aDP2_256028.png)
![](http://static.oschina.net/uploads/space/2013/0520/222533_Ob0Z_256028.png)
?
![](http://static.oschina.net/uploads/space/2013/0520/223214_M9YY_256028.png)
![](http://static.oschina.net/uploads/space/2013/0520/223307_qVC1_256028.png)
![](http://static.oschina.net/uploads/space/2013/0520/223325_QumD_256028.png)
警告:
13/05/11 16:43:29 INFO input.FileInputFormat: Total input paths to process : 1
13/05/11 16:43:29 INFO util.NativeCodeLoader: Loaded the native-hadoop library
13/05/11 16:43:29 WARN snappy.LoadSnappy: Snappy native library not loaded
速度挺快的,页面上只看到完成的任务:
![](http://static.oschina.net/uploads/space/2013/0520/223337_LHQM_256028.png)
![](http://static.oschina.net/uploads/space/2013/0520/223350_Zkxh_256028.png)
- end
1.Hadoop操作:
1)查看Hadoop版本:
2)自动开启Hadoop:
3)手动开启Hadoop:
2.HDFS操作:
1)查看HDFS上的文件:
2)向HDFS上传文件:
3)从HDFS下载文件:
4)删除HDFS上的文件:
5)HDFS的更多命令:
3.MapReduce示例操作-统计字符
1)在HDFS上执行jar程序:
2)查看统计结果:
1.Hadoop操作:
1)查看Hadoop版本:
![](http://static.oschina.net/uploads/space/2013/0520/220316_FC0a_256028.png)
2)自动开启Hadoop:
?
3)手动开启Hadoop:
![](http://static.oschina.net/uploads/space/2013/0520/220426_M8A2_256028.png)
2.HDFS操作:
1)查看HDFS上的文件:
?![](http://static.oschina.net/uploads/space/2013/0520/220441_C7Fx_256028.png)
2)向HDFS上传文件:
(1)使用put命令:?
![](http://static.oschina.net/uploads/space/2013/0520/221327_YDmo_256028.png)
(2)使用copyFromLocal命令:
?
![](http://static.oschina.net/uploads/space/2013/0520/221338_5EjS_256028.png)
3)从HDFS下载文件:
?![](http://static.oschina.net/uploads/space/2013/0520/221404_QTHz_256028.png)
(2)拷贝整个目录:
![](http://static.oschina.net/uploads/space/2013/0520/221415_HcZZ_256028.png)
![](http://static.oschina.net/uploads/space/2013/0520/221507_Ga7D_256028.png)
红色方框选中的hadoop-hm目录是之前我们在core-site.xml文件中配置的临时目录。红色椭圆选中的home是刚刚我们congHDFS下载的文件夹。
![](http://static.oschina.net/uploads/space/2013/0520/221525_H7gm_256028.png)
4)删除HDFS上的文件:
?![](http://static.oschina.net/uploads/space/2013/0520/221854_VO6R_256028.png)
5)HDFS的更多命令:
![](http://static.oschina.net/uploads/space/2013/0520/222707_ccjk_256028.png)
![](http://static.oschina.net/uploads/space/2013/0520/222246_aDP2_256028.png)
![](http://static.oschina.net/uploads/space/2013/0520/222533_Ob0Z_256028.png)
3.MapReduce示例操作-统计字符
1)在HDFS上执行jar程序:
?![](http://static.oschina.net/uploads/space/2013/0520/223214_M9YY_256028.png)
![](http://static.oschina.net/uploads/space/2013/0520/223307_qVC1_256028.png)
![](http://static.oschina.net/uploads/space/2013/0520/223325_QumD_256028.png)
警告:
13/05/11 16:43:29 INFO input.FileInputFormat: Total input paths to process : 1
13/05/11 16:43:29 INFO util.NativeCodeLoader: Loaded the native-hadoop library
13/05/11 16:43:29 WARN snappy.LoadSnappy: Snappy native library not loaded
速度挺快的,页面上只看到完成的任务:
![](http://static.oschina.net/uploads/space/2013/0520/223337_LHQM_256028.png)
2)查看统计结果:
![](http://static.oschina.net/uploads/space/2013/0520/223350_Zkxh_256028.png)
- end
相关文章推荐
- Linux C/C++编程手册
- Linux命令学习
- nginx 主动防御DDOS攻击
- Hadoop上路_11-HDFS流程演示
- Hadoop上路_12-MapReduce流程演示
- Hadoop上路_14-Hadoop2.3.0的分布式集群搭建
- shell awk 检查程序是否执行
- Hadoop上路_15-HBase0.98.0入门
- Hadoop上路_10-分布式Hadoop集群搭建
- shell 中 ${varname:-word}的作用
- 如何将linux一个程序作为一个服务
- [经验分享] CentOS 6.4x64安装部署zabbix-2.4.5 [复制链接]
- Hadoop: MapReduce2的几个基本示例
- linux命令笔记
- docker 容器中不支持中文的解决方法
- 提示错误:arm-linux-gcc: Command not found
- 架构师主要工作
- linux开发调试工具---GDB的使用
- linux开发调试工具---GDB的使用
- linux开发调试工具---GDB的使用