轻松搭建hadoop1.2.1集群前奏--虚拟机安装与配置
2015-02-20 23:54
525 查看
轻松搭建hadoop1.2.1集群前奏--虚拟机安装与配置
1、修改VMWare10的本机网卡IP:
1.1、VMWare10在windows 上装好之后会出现这两个网卡,选择如下第一个。
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/2732317d0ae091dc4647c7711f646296)
1.2、设置IP:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/1f7896b03087b867977c1a8014565e81)
2、VMWare安装Linux之前准备部分
2.1、点击创建虚拟机:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/2f113c0eabb3f999a8ce7d39a2bc26a7)
2.2、选择自定义安装:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/d699e24799b3776b0b30a3a82d3dc9da)
2,3、直接下一步:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/79ab29a4d5c941ce4e7d0a0aab726e47)
2.4、选择第三个,稍后安装操作系统:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/8302c62e810ae55ba9af913bcde174a9)
2.5、选择安装的Linux版本,我用的是CentOS版本:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/523281da0e6aebd0aac3541f0a75220b)
2.6、为虚拟机起个名字,并设置虚拟机存在本机的目录位置:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/5f9718886856101215e6cb7301a93761)
2.7、设置处理器数量,可以直接下一步:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/c6a97017d9f4e93f1031cabf2387f0a0)
2.8、设置虚拟机内存大小:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/75bfd47936e185cbaa3d40d21ff2682f)
2.9、选择第三个使用仅主机网络:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/94d36d000b4ab3e674787218fb6c060f)
2.10、下一步就行:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/b08336e749f8bd633959683bae6a8081)
2.11、这里要选择IDE,选择其它的可能会报错:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/9df45d169d1b445ad32c84a196344624)
2.12、选择第一个,创建新虚拟磁盘:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/a888d5665e16fd5c1d8cdd1cb6d6ad6e)
2.13、设置存放虚拟机的磁盘大小,虚拟机在磁盘中占得容量是动态调用的:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/14a920b1f5be2f6eae182c62afe55bc9)
2.14、设置虚拟机系统的名字:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/9c651185e02ac8e583916150c78ab700)
2.15、点击完成:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/fa2f8545d63d6df97bcfb176168e136b)
2.16、在VMWare10上显示的虚拟机信息:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/3bd849bc6e87afe235ad96ec02e63222)
2.17、给虚拟机系统指定ISO镜像:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/b10f9d0ae20eccaf19bc22e70f1b8194)
3、Centos安装步骤
3.1、选择第一个开始安装CentOS系统:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/62b5e8dfda35e5649fd2fc1abcb99302)
3.2、选择skip,跳过检查:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/4bfb637de8926b9d757e376f90e0231b)
3.3、点击next:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/421a9ffcc6045262a81ecf325a634542)
3.4、为系统选择安装语言,这里选择中文简体:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/33e51ffa4c2f365822598230f988ac3a)
3.5、选择键盘,美国英语式:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/78ced72944a1cad5e7cf803f4f992edd)
3.6、选择第一个,如果2.11步选择的不是IDE,这里会报错:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/ed1094daa6b1d00ea52ae717a5b156ce)
3.7、选择是 忽略所有数据:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/bd4490a4277261598e266cd29317420f)
3,8、为系统设置主机名和IP地址:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/1d2a853a6b991c3d8a0a1eeaa6016d24)
3.9、设置系统时间:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/b6efc9bbd48198657ea6a6150e04a691)
3.10、为账户设置一个密码,如果密码设置的简单会出来警告,选择无论如何都使用:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/8062663f8f6940d5b16a7df7f07be296)
3.11、为系统设置分区,自定义分区:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/c40c89d38c6390346f078dc1680f3bd4)
3.12、我设置了一个 / 目录和一个 交换空间 swap:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/875783dfe3ffd9905bb0ac62c8151ae6)
3.13、选择格式化:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/6f33e98406a24860e8c91fcb4e051373)
3.14、选择将修改写入磁盘:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/c29f346c189ff6d9d83d5064e9c3c01f)
3.15、选择下一步:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/537f314a319e26dae5049a5b471a7fed)
3.16、选择下一步:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/7f7d04754ad58b0b7c900539fd16cbf2)
3.17、开始安装系统,时间大概有个30来分钟:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/2a333eae979544f4e2db079986e82306)
3.18、重新引导:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/1db52b409abad2b29b3b058459a6ab56)
3.19、选择前进,就是下一步往下走:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/6671d51540b232f85b9239976a4247d9)
3.20、选择前进,就是下一步往下走:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/a74ce668aaa84ce732884a578d8820e5)
3.21、为系统设置一个用户名:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/6b8648ad84d4bb2c5092b2b9c76c82a4)
3.22、默认时间就行:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/ab9d26ef432ce30125d9197b3366f597)
3.23、下一步:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/0e15dd5b7c711c8e29c94000c67a08f5)
3.24、安装成功:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/484696d183c3d9b37b7ed72da59b7f3d)
4、远程连接:
4.1打开PieTTY:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/6a02c63f27f3b8d1635f0fb5046e6549)
4.2、设置连接的虚拟机IP、端口:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/65247d41f0a46df00dc3d9b55fb37c82)
4.3、可以查看IP相关信息:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/f2bfd1b0edc605dfe820aa46a094f8d5)
4.4、进去系统,修改隐藏文件 .bash_profile :
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/91bb5ce5c34681600a463071dd311d84)
设置编码UTF8,解决远程工具连接乱码问题:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/7d862b2083a5bd24ef31b67435c57b61)
4.5、在软件option选项里选择Encoding,再选择Unicode UTF8:
乱码问题解决。
4.6、重启虚拟机网卡:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/3f7160ef9268f2f45754d84421367278)
4.7、永久关闭防火墙:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/4b5b7fd9df1f0adfb59925cd7a36348f)
4.8、修改主机名:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/bcbef48e72e28f4bd2b84bc23a37794a)
如下,用之前设置好的就行:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/917775f438d85320a7119feb22c12a42)
4.9、查看IP相关信息:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/0c5ccfb1d0a0ceb92e1823485de12ff1)
4.10、设置IP与主机名绑定:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/bf74f584ffa2891b4c96d9dac16ef6cf)
如下:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/9fe457e07edb3776c8260a8efc8f68e7)
4.11、验证Ping 主机名和IP都可以ping通:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/6d4af9f44f7e2f938b4dbad14a7e59bd)
5、拷贝虚拟机
5.1、把装好的虚拟机内存设小些,因为本机windows的内存就比较小:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/65859a8f9d1d7e5014e5a6e8a6818149)
5.2、右键虚拟机 --> 管理 ---> 克隆,下一步:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/da4d65a26f8b4b13796ed6db8664200a)
5.3、直接下一步:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/9f3a1020a3daa6cb579354b94c42794c)
5.4、选择第二个,创建完整克隆:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/7d6ce3ae5d33046e4f09d86125916276)
5.5、为要克隆出的虚拟机起个名字,并设置存放位置:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/24ea0ca7892fd739fff04d8e417a203c)
5.6、正在克隆中ing:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/c525fa6cd94e71f4926419ab59c6b489)
5.7、克隆完毕:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/e3573f2e0c062f783ec8e6561d2772ec)
5.8、相同方法,再克隆一个一个虚拟机。
克隆的第一个虚拟机我主机名设置为hadoop1,克隆的第二个虚拟机我主机名设置为hadoop2,原先主机名为hadoop0。
5.9、修改hadoop1的相关信息:
操作如下:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/19e20dbe8fa907af41e78c45934b7a29)
修改IP与主机绑定信息:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/f4634cbcb4ad7c23c6789bf35ed9e708)
修改主机名:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/c5bfcfd3260a8466866572ea980a226a)
5.10设置克隆的虚拟机IP:
如果克隆出的虚拟机有两个网络,选择Auth eth1这个网络,默认是空的,在里面进行如下设置,可以把另一个网络删掉:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/93af11a5932c4d9b1d7ee999c68757db)
5.11、重启网络
执行命令:service network restart
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/eecfaf80732baa6ab50ad119620aa1e5)
如果失败,把网络删掉,重启,会自动生成一个:
在自动生成的里面再进行相同设置。
5.12、在windows的cmd里面ping 虚拟机:
![](https://oscdn.geek-share.com/Uploads/Images/Content/201502/20/5c835c3ab004f739e801f9bae0ff9171)
ping通了。
5.13、对主机名为hadoop2 的虚拟机进行相同操作。
这样搭建集群的三台虚拟机就准备好了。
1、修改VMWare10的本机网卡IP:
1.1、VMWare10在windows 上装好之后会出现这两个网卡,选择如下第一个。
1.2、设置IP:
2、VMWare安装Linux之前准备部分
2.1、点击创建虚拟机:
2.2、选择自定义安装:
2,3、直接下一步:
2.4、选择第三个,稍后安装操作系统:
2.5、选择安装的Linux版本,我用的是CentOS版本:
2.6、为虚拟机起个名字,并设置虚拟机存在本机的目录位置:
2.7、设置处理器数量,可以直接下一步:
2.8、设置虚拟机内存大小:
2.9、选择第三个使用仅主机网络:
2.10、下一步就行:
2.11、这里要选择IDE,选择其它的可能会报错:
2.12、选择第一个,创建新虚拟磁盘:
2.13、设置存放虚拟机的磁盘大小,虚拟机在磁盘中占得容量是动态调用的:
2.14、设置虚拟机系统的名字:
2.15、点击完成:
2.16、在VMWare10上显示的虚拟机信息:
2.17、给虚拟机系统指定ISO镜像:
3、Centos安装步骤
3.1、选择第一个开始安装CentOS系统:
3.2、选择skip,跳过检查:
3.3、点击next:
3.4、为系统选择安装语言,这里选择中文简体:
3.5、选择键盘,美国英语式:
3.6、选择第一个,如果2.11步选择的不是IDE,这里会报错:
3.7、选择是 忽略所有数据:
3,8、为系统设置主机名和IP地址:
3.9、设置系统时间:
3.10、为账户设置一个密码,如果密码设置的简单会出来警告,选择无论如何都使用:
3.11、为系统设置分区,自定义分区:
3.12、我设置了一个 / 目录和一个 交换空间 swap:
3.13、选择格式化:
3.14、选择将修改写入磁盘:
3.15、选择下一步:
3.16、选择下一步:
3.17、开始安装系统,时间大概有个30来分钟:
3.18、重新引导:
3.19、选择前进,就是下一步往下走:
3.20、选择前进,就是下一步往下走:
3.21、为系统设置一个用户名:
3.22、默认时间就行:
3.23、下一步:
3.24、安装成功:
4、远程连接:
4.1打开PieTTY:
4.2、设置连接的虚拟机IP、端口:
4.3、可以查看IP相关信息:
4.4、进去系统,修改隐藏文件 .bash_profile :
设置编码UTF8,解决远程工具连接乱码问题:
4.5、在软件option选项里选择Encoding,再选择Unicode UTF8:
乱码问题解决。
4.6、重启虚拟机网卡:
4.7、永久关闭防火墙:
4.8、修改主机名:
如下,用之前设置好的就行:
4.9、查看IP相关信息:
4.10、设置IP与主机名绑定:
如下:
4.11、验证Ping 主机名和IP都可以ping通:
5、拷贝虚拟机
5.1、把装好的虚拟机内存设小些,因为本机windows的内存就比较小:
5.2、右键虚拟机 --> 管理 ---> 克隆,下一步:
5.3、直接下一步:
5.4、选择第二个,创建完整克隆:
5.5、为要克隆出的虚拟机起个名字,并设置存放位置:
5.6、正在克隆中ing:
5.7、克隆完毕:
5.8、相同方法,再克隆一个一个虚拟机。
克隆的第一个虚拟机我主机名设置为hadoop1,克隆的第二个虚拟机我主机名设置为hadoop2,原先主机名为hadoop0。
5.9、修改hadoop1的相关信息:
操作如下:
修改IP与主机绑定信息:
修改主机名:
5.10设置克隆的虚拟机IP:
如果克隆出的虚拟机有两个网络,选择Auth eth1这个网络,默认是空的,在里面进行如下设置,可以把另一个网络删掉:
5.11、重启网络
执行命令:service network restart
如果失败,把网络删掉,重启,会自动生成一个:
在自动生成的里面再进行相同设置。
5.12、在windows的cmd里面ping 虚拟机:
ping通了。
5.13、对主机名为hadoop2 的虚拟机进行相同操作。
这样搭建集群的三台虚拟机就准备好了。
相关文章推荐
- 轻松搭建hadoop1.2.1集群前奏--虚拟机安装与配置
- 轻松搭建hadoop-1.2.1集群--快速配置SSH免密码登陆
- 轻松搭建hadoop-1.2.1集群(4)--配置Zookeeper集群
- 轻松搭建hadoop-1.2.1集群(5)—配置HBase集群
- 轻松搭建hadoop-1.2.1集群(3)--配置hadoop集群软件
- Hadoop-1.2.1集群虚拟机搭建
- Hadoop分布式集群搭建(一)创建hadoop用户、配置ssh、安装jdk
- hadoop - hadoop2.6 分布式 - 集群环境搭建 - JDK安装配置和SSH安装配置与免密码登陆(集群中)
- Hadoop2.2.0安装配置手册!完全分布式Hadoop集群搭建过程~(心血之作啊~~)
- 联想ThinkPad S3-S440虚拟机安装,ubuntu安装,Hadoop(2.7.1)详解及WordCount运行,spark集群搭建
- hadoop1.2.1在linux中配置安装独立运行Standalone Operation,伪分布Pseudo-Distributed Operation,集群配置三种配置和测试
- hadoop - hadoop2.6 分布式 - 集群环境搭建 - Hadoop 2.6 分布式安装配置与启动
- Hadoop2.2.0安装配置手册!完全分布式Hadoop集群搭建过程~(心血之作啊~~)
- hadoop1.2.1集群安装(虚拟机和主机ubuntu12.04构成)----连接eclipse
- Hadoop2.2.0安装配置手册!完全分布式Hadoop集群搭建过程
- hadoop-1.2.1集群配置搭建
- Hadoop2.2.0安装配置手册!完全分布式Hadoop集群搭建过程~(心血之作啊~~)
- 【Hadoop】8、基于虚拟机的Hadoop1.2.1完全分布式集群安装
- Hadoop2.2.0安装配置手册!完全分布式Hadoop集群搭建过程