run hadoop in ghc and aws
2014-02-26 07:29
351 查看
jar Success step in GHC
1. javac MapReduce.java
2. jar -cvf mr.jar *.class
3. hadoop fs -copyFromLocal mr.jar /user/linal
4. export HADOOP_CLASSPATH=$HADOOP_CLASSPATH:./mr.jar
5. hadoop jar mr.jar MapReduce RCV1.small_test.txt testmr 1
AWS
1. jar location
s3://10605-s14-project-linal/HW4b/mr.jar
2.
MapReduce s3://10605-s14-project-linal/HW4/RCV1.small_test.txt s3://10605-s14-project-linal/HW4b/small_test 10
classname input
output size
1. javac MapReduce.java
2. jar -cvf mr.jar *.class
3. hadoop fs -copyFromLocal mr.jar /user/linal
4. export HADOOP_CLASSPATH=$HADOOP_CLASSPATH:./mr.jar
5. hadoop jar mr.jar MapReduce RCV1.small_test.txt testmr 1
AWS
1. jar location
s3://10605-s14-project-linal/HW4b/mr.jar
2.
MapReduce s3://10605-s14-project-linal/HW4/RCV1.small_test.txt s3://10605-s14-project-linal/HW4b/small_test 10
classname input
output size
相关文章推荐
- Linux脚本利器sed
- Steps in Setting hadoop in GHC
- linux下挂载硬盘!
- unix/linux 系统实现多个进程监听同一个端口
- Linux下使用tmux
- 编译安装apache
- Linux中文件查找——find命令 推荐
- Apache Prefork、Worker和Event三种MPM
- 网站许久不管为什么排名越来越好
- Linux yum仓库的安装
- 文件查找工具find命令总结
- WH_CBT监控有窗体的进程创建
- linux 硬盘空间查看常用命令
- 【PHP】 让PHP执行Linux命令
- 构建高并发高可用的电商平台架构实践
- 腾讯大规模Hadoop集群实践
- 4年成为一个产品线的架构师!我操,我他妈太慢了!
- 打听nofollow标签能力做好网站seo优化
- mount: wrong fs type, bad option, bad superblock on /dev/loop0
- Linux的文件搜索神器-find