Hadoop学习:(二)hadoop的简介
2013-01-13 20:03
253 查看
hadoop的版本区别:
1.0.X - current stable version, 1.0 release
1.1.X - current beta version, 1.1 release
2.X.X - current alpha version
0.23.X - simmilar to 2.X.X but missing NN HA.
0.22.X - does not include security
0.20.203.X - old legacy stable version
0.20.X - old legacy version
参考官方地址:http://hadoop.apache.org/releases.html
hadoop框架:
Hadoop 有许多元素构成。其最底部是 Hadoop Distributed File System(HDFS),它存储 Hadoop 集群中所有存储节点上的文件。HDFS(对于本文)的上一层是 MapReduce 引擎,该引擎由 JobTrackers 和 TaskTrackers 组成。
hadoop集群搭建:
(略)参考:http://www.cnblogs.com/xia520pi/category/346943.html
主要学习hadoop框架以及背后的思想,编码mapreduce程序,来解决实际问题。
mapreduce过程:
主要为六个过程:
InputFormat
Mapper
Commbiner
Partitioner
Reducer
OutputFormat
学习开发的hadoop版本:1.0.4
1.0.X - current stable version, 1.0 release
1.1.X - current beta version, 1.1 release
2.X.X - current alpha version
0.23.X - simmilar to 2.X.X but missing NN HA.
0.22.X - does not include security
0.20.203.X - old legacy stable version
0.20.X - old legacy version
参考官方地址:http://hadoop.apache.org/releases.html
hadoop框架:
Hadoop 有许多元素构成。其最底部是 Hadoop Distributed File System(HDFS),它存储 Hadoop 集群中所有存储节点上的文件。HDFS(对于本文)的上一层是 MapReduce 引擎,该引擎由 JobTrackers 和 TaskTrackers 组成。
hadoop集群搭建:
(略)参考:http://www.cnblogs.com/xia520pi/category/346943.html
主要学习hadoop框架以及背后的思想,编码mapreduce程序,来解决实际问题。
mapreduce过程:
主要为六个过程:
InputFormat
Mapper
Commbiner
Partitioner
Reducer
OutputFormat
学习开发的hadoop版本:1.0.4
相关文章推荐
- Hadoop学习笔记——01.简介
- Hadoop 学习总结之一:HDFS简介
- hadoop学习笔记<一>----hadoop简介
- 大数据学习笔记1--hadoop简介和入门
- 【Hadoop学习】Apache Hadoop项目简介
- hadoop学习笔记(二)——hadoop思想简介
- hadoop学习笔记(一)--简介
- hadoop2.7.2学习笔记05-hadoop文件系统API定义-简介
- Hadoop学习之Hive简介
- 大数据学习笔记——hadoop1.2.1 MapReduce简介
- Hadoop 学习总结之一:HDFS简介
- Hadoop学习笔记——简介及WordCount
- Hadoop 学习总结之一:HDFS简介(zz写的很不错)
- Hadoop 学习总结之一:HDFS简介
- Hadoop学习笔记(三):Hive简介
- hadoop2.5.2学习13-MR之新浪微博TF-IDF算法简介
- Hadoop 学习总结之一:HDFS简介(转载)
- Hadoop学习笔记之Hadoop简介
- Hadoop-2.2.0学习之一Hadoop-2.2.0变化简介