Hadoop单机环境搭建
2015-03-19 00:00
288 查看
摘要: Hadoop单机版 搭建
#Hadoop环境#
##操作系统##
我用的是Mac,其实Mac系统也是Linux的一个分支,用RedHat,CenterOS,Ubuntu等都是一样的。不建议在windows下安装Hadoop
##安装前提##
Java
SSH
##获取Hadoop安装包##
这个自己百度吧,我用的是hadoop-2.3.0
##将下载的hadoop安装包用FTP工具上传到Linux服务器的/usr/local目录下
##解压hadoop压缩包
##设置环境变量
vi /etc/profile
添加环境变量: export HADOOP_HOME=/usr/local/hadoop-2.3.0
将hadoop添加到PATH变量中: PATH = $HADOOP_HOME/bin:$PATH
使环境变量生效 : source /etc/profile
##修改Hadoop配置文件##
###修改hdfs-site.xml###
###修改core-site.xml
###修改 mapred-site.xml
###修改hadoop-env.sh
增加一行:(依照个人的Java安装路径填写)
##至此,hadoop的安装和配置已经ok##
先格式化一下HDFS系统:
hadoop namenode -format
然后我们可以启动hadoop了
cd /usr/local/hadoop-2.3.0/sbin
./start-all.sh
如果启动时 没有明显的报错,那么说明安装成功了。
##验证
hadoop fs -mkdir /d1 #创建的目录
hadoop fs -ls / #查看根目录
#Hadoop环境#
##操作系统##
我用的是Mac,其实Mac系统也是Linux的一个分支,用RedHat,CenterOS,Ubuntu等都是一样的。不建议在windows下安装Hadoop
##安装前提##
Java
SSH
##获取Hadoop安装包##
这个自己百度吧,我用的是hadoop-2.3.0
##将下载的hadoop安装包用FTP工具上传到Linux服务器的/usr/local目录下
##解压hadoop压缩包
cd /usr/local/ tar -zxvf hadoop-2.3.0.tar.gz
##设置环境变量
vi /etc/profile
添加环境变量: export HADOOP_HOME=/usr/local/hadoop-2.3.0
将hadoop添加到PATH变量中: PATH = $HADOOP_HOME/bin:$PATH
使环境变量生效 : source /etc/profile
##修改Hadoop配置文件##
###修改hdfs-site.xml###
<configuration> <property> <name>dfs.replication</name> <value>1</value> </property> <property> <name>dfs.permissions</name> <value>false</value> </property> </configuration>
###修改core-site.xml
<configuration> <property> <name>fs.default.name</name> <value>hdfs://localhost:9000</value> </property> <property> <name>hadoop.tmp.dir</name> <value>/usr/local/hadoop-2.3.0</value> </property> </configuration>
###修改 mapred-site.xml
<configuration> <property> <name>mapred.job.tracker</name> <value>localhost:9001</value> </property> </configuration>
###修改hadoop-env.sh
增加一行:(依照个人的Java安装路径填写)
export JAVA_HOME=/Library/Java/JavaVirtualMachines/jdk1.8.0_25.jdk/Contents/Home
##至此,hadoop的安装和配置已经ok##
先格式化一下HDFS系统:
hadoop namenode -format
然后我们可以启动hadoop了
cd /usr/local/hadoop-2.3.0/sbin
./start-all.sh
如果启动时 没有明显的报错,那么说明安装成功了。
##验证
hadoop fs -mkdir /d1 #创建的目录
hadoop fs -ls / #查看根目录
如果结果正确,代表hadoop单机环境搭建成功.恭喜!~
相关文章推荐
- centos hadoop 单机部署环境搭建
- ubuntu12.04下安装hadoop-1.0.3 并搭建单机伪分布式运行环境(一)
- Ubuntu上搭建Hadoop环境(单机模式+伪分布模式)
- Ubuntu上搭建Hadoop环境(单机模式+伪分布模式)
- hadoop单机环境搭建
- hadoop入门之单机版环境搭建[转]
- Ubuntu上搭建Hadoop环境(单机模式+伪分布模式)
- 王家林 云计算分布式大数据Hadoop实战高手之路---从零开始 第二讲:全球最详细的从零起步搭建Hadoop单机和伪分布式开发环境图文教程
- Ubuntu上搭建Hadoop环境(单机模式+伪分布模式)
- Ubuntu上搭建Hadoop环境(单机模式+伪分布模式) (转载)
- linux(centos5.8)环境下Hadoop 2.0.2单机部署以及Eclipse环境搭建
- <转>单机版搭建Hadoop环境
- Ubuntu上搭建Hadoop环境(单机模式+伪分布模式)
- Ubuntu上搭建Hadoop环境(单机模式+伪分布模式)
- hadoop入门之单机版环境搭建(多图)
- Ubuntu上搭建Hadoop环境(单机模式+伪分布模式)
- 王家林 云计算分布式大数据Hadoop实战高手之路---从零开始 第二讲:全球最详细的从零起步搭建Hadoop单机和伪分布式开发环境图文教程
- 从零起步搭建Hadoop单机和伪分布式开发环境图文教程
- ubuntu12.04下hadoop单机模式和伪分布模式环境搭建
- Ubuntu上搭建Hadoop环境(单机模式+伪分布模式)