Third Party Jars for Storm Cluster
2015-05-11 15:25
260 查看
近几日写的Storm集群应用需要用到java本地调用,调用中科院的分词工具统计微博信息。当然,很简单的一个应用,但是在本地调用Native Method上面出现了各种问题,解决后还有第三方库的调用问题。
当然,用eclipse进行storm本地模式的编译运行基本是没什么问题的,因为可以手动添加classpath。但是一旦倒出jar包,那么在storm集群上的运行可能就会出现第三方jar包找不到的问题。可以试一下以下几种方式。
如果你只需要一个第三方库(或者不多),那么之间将集群的每台节点上面的CLASSPATH添加上你需要的jar的路径。
将jar拷贝到storm lib中。一般是 $STORM_HOME/lib。
如果还不行,不妨试一下编辑$STORM_HOME/conf下面的storm.yaml文件,加入 java.library.path: “/usr/local/lib:/opt/local/lib:/usr/lib:你的lib目录”。
注意,”:”后面有一个空格,java.library.path前面也有空格。
不管怎样,我经过N次调试,算是成功了。
PS,尽量还是不要做用java调c这样麻烦的事情最好!
当然,用eclipse进行storm本地模式的编译运行基本是没什么问题的,因为可以手动添加classpath。但是一旦倒出jar包,那么在storm集群上的运行可能就会出现第三方jar包找不到的问题。可以试一下以下几种方式。
如果你只需要一个第三方库(或者不多),那么之间将集群的每台节点上面的CLASSPATH添加上你需要的jar的路径。
将jar拷贝到storm lib中。一般是 $STORM_HOME/lib。
如果还不行,不妨试一下编辑$STORM_HOME/conf下面的storm.yaml文件,加入 java.library.path: “/usr/local/lib:/opt/local/lib:/usr/lib:你的lib目录”。
注意,”:”后面有一个空格,java.library.path前面也有空格。
不管怎样,我经过N次调试,算是成功了。
PS,尽量还是不要做用java调c这样麻烦的事情最好!
相关文章推荐
- How can I force WebLogic to use third party jars that are included in my Ear?
- Third Party Extensions for Enterprise Architect
- Maven:the way to add third-party jar-package to Local Maven Repository for using conveniently
- 6. Design Partition Guidelines for Third-Party IP Delivery
- Third party controls for Delphi (delphi 第三方控件)
- HOWTO set up a MySQL Cluster for two servers
- 在Ionic 2中使用TypeScript使用第三方cordova插件(Using a third-party cordova plugin in Ionic 2 with TypeScript)
- Configure Red Hat Enterprise Linux shared disk cluster for SQL Server
- 【Java.ThirdParty】日志——Log4j——2——实现剖析
- How to set a breakpoint on a property within a third-party managed component?
- Sinevibes Cluster for Mac(动画过滤器)免激活版 v2.0.1破解版
- XAMPP FOR PHPSTORM
- parallel_studio_xe_2018_update1_cluster_edition for Linux 安装教程
- Arcgis for JS之Cluster聚类分析的实现
- Percona XtraDB Cluster 5.5.30-23.7.4 for MySQL
- Intel® Parallel Studio XE Cluster Edition for Linux* 2017 安装
- IOS: How to authenticate the GKLocalPlayer on my 'third party server'.
- redis集群 Waiting for the cluster to join 一直等待
- PhpStorm for Mac
- Configure Red Hat Enterprise Linux shared disk cluster for SQL Server