您的位置:首页 > 运维架构

Sqoop2 使用

2018-01-12 11:47 417 查看
Sqoop2的安装与使用

使用Sqoop从MySQL导入数据到Hive和HBase 及近期感悟

Sqoop User Guide

问题1: java.lang.NoClassDefFoundError: org/codehaus/jackson/map/JsonMappingException

解决办法:

cd /opt/cloudera/parcels/CDH/lib/hadoop/client
sudo ln -s ../../hadoop-hdfs/lib/jackson-mapper-asl-1.8.8.jar .
sudo ln -s ../../hadoop-hdfs/lib/jackson-core-asl-1.8.8.jar .


然后重启 Sqoop2,再运行,就OK了。

CDH官方论坛上方案详细

问题2 : 如果遇见总是 RUNNING - 0.00 % ,然后最后 failed,检查一下log,看下是不是hdfs的权限问题,

解决办法:sqoop2 会默认以 用户名 sqoop2 ,向 hdfs 提交数据,所以最好以sqoop2 用户新建一个文件来写入,不然写入其他用户名下的文件夹时会提示没有写入权限
内容来自用户分享和网络整理,不保证内容的准确性,如有侵权内容,可联系管理员处理 点击这里给我发消息
标签:  Sqoop2