python脚本 快速执行mapreduce程序
2013-05-20 19:06
295 查看
在命令行下执行mapreduce程序时,我们需要输入很长的字符串,文件的输入路径、输出路径等。
一个简单的python脚本即可,省去这些不必要的麻烦,以后执行mapreduce程序时,只需要进行稍微更改即可。runjob.py脚本内容如下:
下面,我们给这个文件赋予可执行的权限:
chmod 775 runjob.py //当前用户和当前用户所属的组具有读、写、执行的权限,其它用户具有读、写的权限。
一个简单的python脚本即可,省去这些不必要的麻烦,以后执行mapreduce程序时,只需要进行稍微更改即可。runjob.py脚本内容如下:
#!/usr/bin/python import os cmd = 'hadoop jar examples.jar org.apache.hadoop.myexamples.WordCount hdfs://NameNode:9000/user/cloud/input/cite1.txt hdfs://NameNode:9000/user/cloud/output008' os.system(cmd)
下面,我们给这个文件赋予可执行的权限:
chmod 775 runjob.py //当前用户和当前用户所属的组具有读、写、执行的权限,其它用户具有读、写的权限。
相关文章推荐
- C 使用System Call:exec 执行Python 脚本(或其他程序)
- 【Python学习系列四】Python程序通过hadoop-streaming提交到Hadoop集群执行MapReduce
- 转换python脚本为可执行程序的方式
- 转换python脚本为可执行程序的方式
- 使用py2exe打包python脚本为exe可执行程序
- python 脚本转成exe可执行程序
- python3.6版本生成的python脚本如何打包为可独立执行的exe程序
- Apache Web 服务器配置CGI程序,执行Python、Perl脚本
- 从 stdin 读取输入的C程序示例 && python脚本调用可执行文件
- 使用 pyinstaller 把python脚本打包成 windows exe 可执行程序
- 计算程序执行时间的脚本python3.6(Win7x64)
- Python脚本转换成windows的exe可执行程序
- python:通过python脚本快速执行 bash 命令
- Python脚本转可执行程序 cx_Freeze
- python脚本转化单个exe执行程序
- python 脚本转成exe可执行程序
- windows下为Python脚本生成单独可执行程序的脚本(不用为每个脚本写setup.py了)
- Python脚本转可执行程序cx_Freeze
- 用Python脚本转换成windows的可执行程序
- PyInstaller将python脚本打包成exe可执行程序