spark使用hive出错,添加以下配置
2016-05-12 10:40
344 查看
错误:Failed to start database 'metastore_db' with class loader org.apache.spark.sql
SPARK_HOME/CONF/spark-env.sh中配置:
export HIVE_CONF_DIR=/opt/modules/hive-1.0.1/conf
export CLASSPATH=$CLASSPATH:/opt/modules/hive-1.0.1/lib
export SPARK_CLASSPATH=$SPARK_CLASSPATH:/opt/modules/hive-1.0.1/lib/mysql-connector-java-5.1.37-bin.jar
将hive-site.xml拷贝到SPARK_HOME/conf下
cp hive-site.xml /opt/modules/spark-1.6.0-bin-hadoop2.6/conf/
SPARK_HOME/CONF/spark-env.sh中配置:
export HIVE_CONF_DIR=/opt/modules/hive-1.0.1/conf
export CLASSPATH=$CLASSPATH:/opt/modules/hive-1.0.1/lib
export SPARK_CLASSPATH=$SPARK_CLASSPATH:/opt/modules/hive-1.0.1/lib/mysql-connector-java-5.1.37-bin.jar
将hive-site.xml拷贝到SPARK_HOME/conf下
cp hive-site.xml /opt/modules/spark-1.6.0-bin-hadoop2.6/conf/
相关文章推荐
- 三款SDR平台对比:HackRF,bladeRF和USRP
- Web压力测试工具webbench
- 无插件Vim编程技巧
- [KaliLinux2.0]关于VisualBox和VMWare的配置问题
- Kalendae:JavaScript日期选择和日历控件使用
- 在ASP.NET 2.0中操作数据之三十八:处理BLL和DAL的异常
- RedHat7改密码与系统修复
- 提高篇项目6——回文数
- Android调用系统关机指令
- C# 委托,Lambda表达式 and Swift 委托,闭包
- 设置UIButton的文字显示位置、字体的大小、字体的颜色
- 如何彻底删除SVN中的文件和文件夹
- 手动载入NT驱动
- Asp.Net请求处理过程
- java生成订单编号工具
- LeetCode No347. Top K Frequent Elements
- android 关于WebView点击图片展示大图
- iOS中使用nil NULL NSNULL的区别
- 数据库备份
- 反编译dex2jar和jar-GUI的命令