配置并启动spark的thriftserver网关
2015-06-23 17:45
435 查看
1、保证spark-sql已经使用mysql作为metadata存储介质
2、启动thrift网关
$SPARK_HOME/sbin/start-thriftserver.sh --driver-class-path
/usr/local/spark/spark-1.3.0-bin-hadoop2.3/lib/mysql-connector-java-5.1.6-bin.jar
--master spark://hd1:7077 --executor-memory 2g --total-executor-cores 10
3、确认是否正确
beeline
>!connect jdbc:hive2://hd1:10000
user:hadoop
password:******
show databases;
show tables;
如果能够看到和本地启动的spark-sql一样的结果,就是确认成功了。
2、启动thrift网关
$SPARK_HOME/sbin/start-thriftserver.sh --driver-class-path
/usr/local/spark/spark-1.3.0-bin-hadoop2.3/lib/mysql-connector-java-5.1.6-bin.jar
--master spark://hd1:7077 --executor-memory 2g --total-executor-cores 10
3、确认是否正确
beeline
>!connect jdbc:hive2://hd1:10000
user:hadoop
password:******
show databases;
show tables;
如果能够看到和本地启动的spark-sql一样的结果,就是确认成功了。
相关文章推荐
- Spark随谈——开发指南(译)
- Spark,一种快速数据分析替代方案
- 路由器启动的顺序
- 免安转MySQL服务的启动与停止方法
- VC++实现程序开机启动运行的方法
- Oracle监听器服务不能启动的解决方法
- 使用VBS禁用、启动USB存储设备
- ip修改后orcale服务无法启动问题解决
- 使用批处理实现启动和停止服务的代码分析(net start&net stop)
- 计算机名称修改后Oracle不能正常启动问题分析及解决
- log引起的mysql不能启动的解决方法
- MySQL服务器的启动和关闭
- JS启动应用程序的一个简单例子
- Apache 本地服务器启动后又自动停止解决办法
- Nginx 启动、停止、重启、升级操作命令收集
- linux启动级别的含义(init 0-6)
- php-fpm开机自动启动Shell脚本
- Shell脚本实现启动PHP内置FastCGI Server
- 使用 Iisftp.vbs 启动FTP站点的方法
- 基于C#实现Windows服务状态启动和停止服务的方法