Hadoop单机非分布式模式 配置
2012-04-10 21:24
441 查看
环境:ubuntu 8.04.4
hadoop-1.0.2
参考网址:
/article/6104068.html
http://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop1/index.html
一、介绍 Hadoop(官网,了解下即可)
http://hadoop.apache.org/
二、下载Hadoop,我下的是hadoop-1.0.2.tar.gz
http://www.apache.org/dyn/closer.cgi/hadoop/common/
推荐用renren的源:
http://labs.renren.com/apache-mirror/hadoop/common/
三、解压
tar -xf hadoop-1.0.2.tar.gz
四、拷贝到 /usr/local/ 路径下
sudo mv hadoop-1.0.2/ /usr/local/
五、修改hadoop的java环境变量的路径
sudo gedit /usr/local/hadoop-1.0.2/conf/hadoop-env.sh
加入:
export JAVA_HOME=/usr/lib/java/jdk1.7.0_03
单机非分布式模式 完成!
六、测试
参考:http://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop1/index.html
执行以下命令:
cd /usr/local/hadoop-1.0.2
mkdir test-in
cd test-in/
#在 test-in 目录下创建两个文本文件, WordCount 程序将统计其中各个单词出现次数
echo "hello world bye world" >file1.txt //自动新建文件,并写入字符串
echo "hello hadoop goodbye hadoop" >file2.txt
cd ..
bin/hadoop jar hadoop-examples-1.0.2.jar wordcount test-in/ test-out
#执行完毕,下面查看执行结果:
cd test-out/
cat part-r-00000
结果如下:
bye 1
goodbye 1
hadoop 2
hello 2
world 2
hadoop-1.0.2
参考网址:
/article/6104068.html
http://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop1/index.html
一、介绍 Hadoop(官网,了解下即可)
http://hadoop.apache.org/
二、下载Hadoop,我下的是hadoop-1.0.2.tar.gz
http://www.apache.org/dyn/closer.cgi/hadoop/common/
推荐用renren的源:
http://labs.renren.com/apache-mirror/hadoop/common/
三、解压
tar -xf hadoop-1.0.2.tar.gz
四、拷贝到 /usr/local/ 路径下
sudo mv hadoop-1.0.2/ /usr/local/
五、修改hadoop的java环境变量的路径
sudo gedit /usr/local/hadoop-1.0.2/conf/hadoop-env.sh
加入:
export JAVA_HOME=/usr/lib/java/jdk1.7.0_03
单机非分布式模式 完成!
六、测试
参考:http://www.ibm.com/developerworks/cn/opensource/os-cn-hadoop1/index.html
执行以下命令:
cd /usr/local/hadoop-1.0.2
mkdir test-in
cd test-in/
#在 test-in 目录下创建两个文本文件, WordCount 程序将统计其中各个单词出现次数
echo "hello world bye world" >file1.txt //自动新建文件,并写入字符串
echo "hello hadoop goodbye hadoop" >file2.txt
cd ..
bin/hadoop jar hadoop-examples-1.0.2.jar wordcount test-in/ test-out
#执行完毕,下面查看执行结果:
cd test-out/
cat part-r-00000
结果如下:
bye 1
goodbye 1
hadoop 2
hello 2
world 2
相关文章推荐
- hadoop学习(二)-----配置hadoop单机伪分布式模式
- centos下搭建单机和伪分布式hadoop环境-(3)配置hadoop的伪分布式模式
- Hadoop单机非分布式模式 配置
- Ubuntu11.10下安装和配置hadoop2.20(单机模式)
- [Nutch]Hadoop单机伪分布模式的配置
- Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04
- Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04
- 配置Hadoop单机模式并运行Wordcount
- hadoop单机模式和伪分布式模式安装过程
- 单机模式hadoop的配置
- 转载:Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04
- 单机伪分布式模式 运行MapReduce程序 配置问题
- Hadoop安装教程_单机/伪分布式配置
- Ubuntu下伪分布式模式Hadoop的安装及配置
- Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.4/Ubuntu16.04
- Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04
- 在ubuntu部署hadoop之单机模式与伪分布式模式部署
- Hadoop安装_单机伪分布式配置
- 【Spark亚太研究院系列丛书】Spark实战高手之路-第一章 构建Spark集群-配置Hadoop单机模式并运行Wordcount(1)
- Ubuntu系统下的Hadoop集群(1)_Hadoop安装教程_单机/伪分布式配置