HADOOP的学习笔记 (第二期)
2012-10-15 22:07
274 查看
前段时间写了hadoop学习笔记第一期,这段时间一直忙,没有时间。今天来写第二期吧。关于全分布模式。
我用的是虚拟的两台机器,环境都是centos 5.5 。
master 192.168.0.150
slaver 192.168.0.152
第一步:首先都按照第一期(/article/8731525.html)的操作做两台单机环境。
第二步:因为master向slaver中放置文件的时候都是通过SSH,所以配置两台机器都需要免密码登陆。配置方式前面也已经讲过,在master中生成的id_rsa.pub scp到slaver中。
第三步:配置host /etc/hosts和主机名
第四步:修改核心的配置文件:core-site.xml,hdfs-site.xml,mapred-site.xml
1.修改core-site.xml
2.修改mapred-site.xml
第五步:在分别修改两台机器中的masters 和 slavers 如图:
第六步:至此,基本就是配置完毕,然后执行下format, start以后用 hadoop dfsadmin -report 看下。
我用的是虚拟的两台机器,环境都是centos 5.5 。
master 192.168.0.150
slaver 192.168.0.152
第一步:首先都按照第一期(/article/8731525.html)的操作做两台单机环境。
第二步:因为master向slaver中放置文件的时候都是通过SSH,所以配置两台机器都需要免密码登陆。配置方式前面也已经讲过,在master中生成的id_rsa.pub scp到slaver中。
第三步:配置host /etc/hosts和主机名
第四步:修改核心的配置文件:core-site.xml,hdfs-site.xml,mapred-site.xml
1.修改core-site.xml
2.修改mapred-site.xml
第五步:在分别修改两台机器中的masters 和 slavers 如图:
第六步:至此,基本就是配置完毕,然后执行下format, start以后用 hadoop dfsadmin -report 看下。
相关文章推荐
- Hadoop之Sqoop框架学习(笔记19)
- Hadoop学习笔记(9) ——源码初窥
- Hadoop学习笔记之深入浅出MR
- Hadoop学习笔记系列文章导航
- 第115讲:Hadoop集群构建硬件选择、集群规模、网络拓扑、机架感知等学习笔记
- [BigData]关于Hadoop学习笔记第三天(PPT总结)(一)
- Hadoop学习笔记 --- hadoop1.0 与 hadoop 2.0架构图
- hadoop学习笔记:hadoop文件系统浅析
- Hadoop学习笔记—7.计数器与自定义计数器
- Hadoop学习笔记(2)----命令归总
- Hadoop学习笔记 1HDFS
- hadoop学习笔记二_MapReduce应用场景、原理、基本架构
- hadoop 1.2.1 Eclipse mapreduce hello word 学习笔记
- hadoop学习笔记---20150731
- hadoop安装学习笔记
- hadoop学习笔记(七)——hadoop权威指南中天气数据运行
- Hadoop 3.0学习笔记(持续更新....)
- hadoop IO学习笔记
- Hadoop学习笔记0003——从Hadoop URL读取数据
- infoq hadoop oozie 简介 学习笔记