hadoop 1.2.1 安装配置
2016-01-12 19:56
441 查看
1.下载地址
https://archive.apache.org/dist/hadoop/common/hadoop-1.2.1/hadoop-1.2.1-bin.tar.gz
2.解压
tar zxvf hadoop-1.2.1-bin.tar.gz
3.配置
1)配置hadoop
core-site.xml
路径必须是执行的用户有读写权限.u-server是本机(linux)的主机名
hdfs-site.xml
mapred-site.xml
2)配置环境变量
HADOOP_HOME:hadoop的位置
PATH:将bin添加到PATH中.
4)测试
运行 hadoop namenode -format 进行初始化
运行 start-all.sh命令启动正常即可
输入jps有以下输出
3.一些命令
//格式化namenode
hadoop namenode -format
//启动
start-all.sh
//查看目录
hadoop fs -ls /
//上传文件
hadoop fs -put xxxx
//新建目录
hadoop fs -mkdir input
//查看文件内容
hadoop fs -cat xxx
//下载文件
hadoop fs get [hadoop上的文件目录] [本地文件位置]
// 查看当前运行情况
hadoop dfsadmin -report
//停止服务
stopall.sh
https://archive.apache.org/dist/hadoop/common/hadoop-1.2.1/hadoop-1.2.1-bin.tar.gz
2.解压
tar zxvf hadoop-1.2.1-bin.tar.gz
3.配置
1)配置hadoop
core-site.xml
<configuration> <property> <name>hadoop.tom.dir</name> <value>/home/harry/hadoop</value> </property> <property> <name>dfs.name.dir</name> <value>/home/harry/hadoop/name</value> </property> <property> <name>fs.default.name</name> <value>hdfs://u-server:9000</value> </property> </configuration>
路径必须是执行的用户有读写权限.u-server是本机(linux)的主机名
hdfs-site.xml
<configuration> <property> <name>dfs.data.dir</name> <value>/home/harry/hadoop/data</value> </property> </configuration>
mapred-site.xml
<configuration> <property> <name>mapred.job.tracker</name> <value>u-server:9001</value> </property> </configuration>
2)配置环境变量
HADOOP_HOME:hadoop的位置
PATH:将bin添加到PATH中.
4)测试
运行 hadoop namenode -format 进行初始化
运行 start-all.sh命令启动正常即可
输入jps有以下输出
5494 SecondaryNameNode 5321 DataNode 5577 JobTracker 5145 NameNode 5835 Jps 5759 TaskTracker
3.一些命令
//格式化namenode
hadoop namenode -format
//启动
start-all.sh
//查看目录
hadoop fs -ls /
//上传文件
hadoop fs -put xxxx
//新建目录
hadoop fs -mkdir input
//查看文件内容
hadoop fs -cat xxx
//下载文件
hadoop fs get [hadoop上的文件目录] [本地文件位置]
// 查看当前运行情况
hadoop dfsadmin -report
//停止服务
stopall.sh
相关文章推荐
- linux添加用户和修改密码
- erlang的shell历史记录
- 如何更改linux文件的拥有者及用户组(chown和chgrp)
- linuxmint 执行 qmake 报错
- SSH Secure Shell Client 连接Linux 乱码
- string类--复制《copy()与copyTo()》
- Linux系统下卸载JDK 重新安装新版本
- Linux搭建 nfs 服务器
- 【MFC两种视频图像採集方法】DirectShow与Opencv
- Ubuntu下Apache、php、mysql默认安装路径
- Tomcat - SSL操作大全
- MFC (通过WM_COPYDATA消息) 进程间通信以及数据传递
- windows向linux传送文件
- linux opendir 和 readdir , closedir用法
- Linux 查看位数 getconf LONG_BIT
- Hadoop基础 hadoop fs 命令
- 编译rt3052的openwrt固件出现的错误解决方法
- win7 VMware player 安装 centos 7
- pomelo 的一些监控和维护插件(工具)
- ssh到openwrt时遇到的问题