spark windows 单机 安装
2016-07-10 15:23
309 查看
0目标
单机windows上,运行spark
1 前期准备
jdk 1.7
2 下载spark 包
官网 http://spark.apache.org/downloads.html 下载响应的hadoop版本的spark,spark-1.6.2-bin-hadoop2.6,spark1.6.2,内嵌hadoop2.6,不要要without的
解压到D:\software\spark-1.6.2-bin-hadoop2.6
将D:\software\spark-1.6.2-bin-hadoop2.6设为SPARK_HOME变量
将D:\software\spark-1.6.2-bin-hadoop2.6\bin 添加到windows 系统Path变量
3 安装windows环境下hadoop依赖
spark是基于hadoop的额,运行过程调用hadoop库,将hadoop2.6编译好的包,下载解压hadoop-2.6.0.tar.gz
https://www.barik.net/archive/2015/01/19/172716/
将D:\software\hadoop-2.6.0设为HADOOP_HOME变量
将D:\software\hadoop-2.6.0\bin添加到系统Path变量中
单机windows上,运行spark
1 前期准备
jdk 1.7
2 下载spark 包
官网 http://spark.apache.org/downloads.html 下载响应的hadoop版本的spark,spark-1.6.2-bin-hadoop2.6,spark1.6.2,内嵌hadoop2.6,不要要without的
解压到D:\software\spark-1.6.2-bin-hadoop2.6
将D:\software\spark-1.6.2-bin-hadoop2.6设为SPARK_HOME变量
将D:\software\spark-1.6.2-bin-hadoop2.6\bin 添加到windows 系统Path变量
3 安装windows环境下hadoop依赖
spark是基于hadoop的额,运行过程调用hadoop库,将hadoop2.6编译好的包,下载解压hadoop-2.6.0.tar.gz
https://www.barik.net/archive/2015/01/19/172716/
将D:\software\hadoop-2.6.0设为HADOOP_HOME变量
将D:\software\hadoop-2.6.0\bin添加到系统Path变量中
相关文章推荐
- LNMP环境搭建
- LightOJ1018 Brush (IV)(状压DP)
- 如何虚拟机里安装Win8操作系统
- 使用opencv进行人脸检测
- 用正则表达式编写验证函数
- 神圣罗马帝国皇帝
- SSD: Single Shot MultiBox Detector
- HDU 1429 (bfs+状态的位压缩)
- Android开发中下拉刷新如何实现
- Singleton VS 'static class'
- Mongodb 性能测试
- ConnectivityManager 确定和监控网络连接状态
- 深度学习与自然语言处理(6)_斯坦福cs224d 一起来学Tensorflow part1
- 商城(一)
- Android Support兼容包详解
- sql增删改查封装
- 添加xmlns:android="http://schemas.android.com/apk/res/android"的意思
- 用Procedure取得全月的日期
- 用户登录
- import openfire4.0.2 source code in eclipse