单机安装hadoop2.6.4
2016-06-07 13:43
344 查看
一.单机安装hadoop2.6.4做测试使用,分为以下几步
配置ip、主机名
安装JDK,并设置环境变量(此处跳过)
下载hadoop,并设置hadoop环境变量
修改4个配置文件
格式化hdfs
启动hadoop
查看hadoop运行情况
二.具体安装步骤和注意详情
1.配置ip、主机名
a)设置主机名(重启后生效),命令: vi /etc/sysconfig/network
b)设置hosts解析,命令:vi /etc/hosts
2. 安装JDK,并设置环境变量(此处略过)
3. 下载Hadoop,并设置环境变量
a)下载地址:http://mirror.bit.edu.cn/apache/hadoop/common,这里选择2.6.4版本
b)拷贝到/opt目录下,解压缩命令: tar -zxvf hadoop-2.6.4.tar.gz,在/etc/profile中配置hadoop的环境变量
执行命令:source /etc/profile使其生效
4. 修改4个配置文件,配置文件所在目录:/opt/hadoop-2.6.4/etc/hadoop
其中没有mapred-site.xml,需要拷贝mapred-site.xml.template并重命名
a)修改hadoop-env.sh,设置JAVA_HOME;
b)修改core-site.xml,配置hadoop.tmp.dir、dfds.name.dir、fs.default.name;
在属性中配置的目录下会生成对应文件夹
c)修改mapred-site.xml,设置mapred.job.tracker;
d)修改hdfs-site.xml,设置dfs.data.dir
5. 格式化hdfs,命令:hadoop namenode -format
6.启动hadoop的所有守护进程,每个进程需要进行本机密码输入
7.查看运行情况,命令:jps
hadoop的web访问界面http://IP:50070/
以上!
配置ip、主机名
安装JDK,并设置环境变量(此处跳过)
下载hadoop,并设置hadoop环境变量
修改4个配置文件
格式化hdfs
启动hadoop
查看hadoop运行情况
二.具体安装步骤和注意详情
1.配置ip、主机名
a)设置主机名(重启后生效),命令: vi /etc/sysconfig/network
b)设置hosts解析,命令:vi /etc/hosts
2. 安装JDK,并设置环境变量(此处略过)
3. 下载Hadoop,并设置环境变量
a)下载地址:http://mirror.bit.edu.cn/apache/hadoop/common,这里选择2.6.4版本
b)拷贝到/opt目录下,解压缩命令: tar -zxvf hadoop-2.6.4.tar.gz,在/etc/profile中配置hadoop的环境变量
执行命令:source /etc/profile使其生效
4. 修改4个配置文件,配置文件所在目录:/opt/hadoop-2.6.4/etc/hadoop
其中没有mapred-site.xml,需要拷贝mapred-site.xml.template并重命名
a)修改hadoop-env.sh,设置JAVA_HOME;
b)修改core-site.xml,配置hadoop.tmp.dir、dfds.name.dir、fs.default.name;
在属性中配置的目录下会生成对应文件夹
c)修改mapred-site.xml,设置mapred.job.tracker;
d)修改hdfs-site.xml,设置dfs.data.dir
5. 格式化hdfs,命令:hadoop namenode -format
6.启动hadoop的所有守护进程,每个进程需要进行本机密码输入
7.查看运行情况,命令:jps
hadoop的web访问界面http://IP:50070/
以上!
相关文章推荐
- Linux socket 初步
- Android之使用Http协议实现文件上传功能
- Linux Kernel 4.0 RC5 发布!
- linux lsof详解
- linux 文件权限
- Linux 执行数学运算
- 10 篇对初学者和专家都有用的 Linux 命令教程
- Linux 与 Windows 对UNICODE 的处理方式
- Ubuntu12.04下QQ完美走起啊!走起啊!有木有啊!
- 解決Linux下Android开发真机调试设备不被识别问题
- 详解HDFS Short Circuit Local Reads
- 运维入门
- 运维提升
- Linux 自检和 SystemTap
- Ubuntu Linux使用体验
- c语言实现hashmap(转载)
- Linux 信号signal处理机制
- linux下mysql添加用户