Hadoop全分布式环境搭建
2012-12-10 09:46
519 查看
Hadoop全分布式环境搭建
远程登录服务器上的三台虚拟机,在这三台虚拟机上搭建hadoop环境
登录211.69.198.201(ysx buzyyu **********)再登陆202.114.10.151(yqf *********)
三台虚拟机的ip:
10.0.5.11 ysx master
10.0.5.12 hadoop01 slave
10.0.5.13 hadoop02 slave
hadoop
依赖java和ssh这两个软件包(java -version; ssh -h)
unpack hadoop的安装包hadoop-0.20.2.tar.gz::tar -xzvf hadoop-0.20.2.tar.gz
echo $JAVA_HOME edit the file conf/hadoop-env.sh to define at least JAVA_HOME to be the root of your Java installation.
vim conf/hadoop-env.sh
1.基本软件准备好,
2.配置无密码登录 ssh localhost
3.修改3个配置文件:
conf/core-site.xml:
conf/hdfs-site.xml:
conf/mapred-site.xml:
远程登录服务器上的三台虚拟机,在这三台虚拟机上搭建hadoop环境
登录211.69.198.201(ysx buzyyu **********)再登陆202.114.10.151(yqf *********)
三台虚拟机的ip:
10.0.5.11 ysx master
10.0.5.12 hadoop01 slave
10.0.5.13 hadoop02 slave
hadoop
依赖java和ssh这两个软件包(java -version; ssh -h)
unpack hadoop的安装包hadoop-0.20.2.tar.gz::tar -xzvf hadoop-0.20.2.tar.gz
echo $JAVA_HOME edit the file conf/hadoop-env.sh to define at least JAVA_HOME to be the root of your Java installation.
vim conf/hadoop-env.sh
1.基本软件准备好,
2.配置无密码登录 ssh localhost
3.修改3个配置文件:
conf/core-site.xml:
<configuration> |
<property> |
<name>fs.default.name</name> |
<value>hdfs://localhost:9000</value> |
</property> |
</configuration> |
<configuration> |
<property> |
<name>dfs.replication</name> |
<value>1</value> |
</property> |
</configuration> |
<configuration> |
<property> |
<name>mapred.job.tracker</name> |
<value>localhost:9001</value> |
</property> |
</configuration> |
相关文章推荐
- 伪分布式模式的Hadoop环境搭建
- Hadoop HDFS分布式环境搭建
- Hadoop学习笔记(3)——分布式环境搭建
- 从零开始搭建hadoop分布式集群环境:(一)新建hadoop用户以及用户组
- Hadoop-2.4.1完全分布式环境搭建
- hadoop2.5.2学习及实践笔记(一)—— 伪分布式学习环境搭建
- 搭建 Hadoop 伪分布式环境
- Hadoop2.7.3+Spark2.1.0 完全分布式环境 搭建全过程
- 分布式集群环境hadoop1.2.0、hbase0.94.4、zookeeper、elasticsearch搭建
- Centos 7 Hadoop-2.5.1 分布式 环境搭建
- Hadoop--Hadoop的伪分布式环境搭建
- Hadoop-2.7.2&Hbase-1.2.2&Hive1.2.1(远程模式)&zookeeper-3.4.8全分布式环境搭建
- Hadoop 2.7 伪分布式环境搭建
- hadoop2.x完全分布式环境搭建 | 适用于hadoop完全分布式集群环境搭建
- hadoop2.6.0版本搭建伪分布式环境
- hadoop学习笔记2:hadoop分布式环境搭建
- Hadoop2.7.2 Centos 完全分布式集群环境搭建 (2) - Hadoop安装与配置(完全分布式)
- 王家林的“云计算分布式大数据Hadoop实战高手之路---从零开始”的第五讲Hadoop图文训练课程:解决典型Hadoop分布式集群环境搭建问题
- 快速搭建 Hadoop 分布式环境
- 基于CentOS的Hadoop分布式环境的搭建——你要知道自己到底该做哪些事儿