MapReduce 运行时报ClassNotFound 时的解决方法
2015-12-08 16:36
281 查看
直接进入正题了
MapReduce程序报ClassNotFound的错误如何解决。
如果你也遇到了这个问题可以按照下面方法解决
1、运行程序就报ClassNotFound ,日志里面没有MapReduce程序运行的任何信息
这就是job时的异常。
解决:首先本地的Classpath中要存在对应的Jar包
也就是必须要能够运行Job 提交任务 当然任务都不能提交成功也就没有第2种情况
2、Map或Reduce运行时出现ClassNotFound
这是任务成功提交后 MapReduce程序运行的时候出现的问题 新手遇到这个问题一般不易找到原因(笔者也是借助别人帮忙很难才找到的) 原因是MapReduce的环境和job的运行环境不同 MapReduce是运行在(2.x)Yarn框架上的
解决:hadoop classpath中要存在对应的jar包
注意 : 这不是改hadoop-env 而是放在hadoop classpath包含的目录中 如果不放在hadoop classpath包含的目录中 有可能出现Job找到类而MapReduce程序找不到的ClassNotFound
本文出自 “ComFan” 博客,请务必保留此出处http://comfan.blog.51cto.com/7184679/1720802
MapReduce程序报ClassNotFound的错误如何解决。
如果你也遇到了这个问题可以按照下面方法解决
1、运行程序就报ClassNotFound ,日志里面没有MapReduce程序运行的任何信息
这就是job时的异常。
解决:首先本地的Classpath中要存在对应的Jar包
也就是必须要能够运行Job 提交任务 当然任务都不能提交成功也就没有第2种情况
2、Map或Reduce运行时出现ClassNotFound
这是任务成功提交后 MapReduce程序运行的时候出现的问题 新手遇到这个问题一般不易找到原因(笔者也是借助别人帮忙很难才找到的) 原因是MapReduce的环境和job的运行环境不同 MapReduce是运行在(2.x)Yarn框架上的
解决:hadoop classpath中要存在对应的jar包
注意 : 这不是改hadoop-env 而是放在hadoop classpath包含的目录中 如果不放在hadoop classpath包含的目录中 有可能出现Job找到类而MapReduce程序找不到的ClassNotFound
本文出自 “ComFan” 博客,请务必保留此出处http://comfan.blog.51cto.com/7184679/1720802
相关文章推荐
- (六)unity4.6Ugui中国教程文档-------概要-UGUI Animation Integration
- 第十二章
- Xcode快捷键
- 第14周项目1.2验证分块查找算法
- MySql相关及如何删除MySql服务
- 解决Linux操作系统下AES解密失败的问题
- 将博客搬至CSDN
- echo %SystemRoot%命令
- NSArray , NSDictionary 的用法...
- ORA-12008
- HashedWheelTimer
- JVM GC原理
- MFC笔记8
- Logcat查看/输出日志信息
- javascript-逻辑与(&&)逻辑或(||)
- nyoj 517 最小公倍数【数学】大数处理
- 成功的背后!(给所有IT人)
- FZU1920 Left Mouse Button(dfs)
- c++中volatile关键字解释
- Jquery easyui从零单排之datagrid数据绑定