sqoop搭建环境: jdk1.8 hadoop分布式集群(HDFS) HIVE(看使用情况)
建议: sqoop1.4.4版本,线上使用比较好,网上相关文档也多 (推介线上使用)
sqoop1.99.7版本,创建job方式规范化,但网上资料较少
步骤:
1.解压包
2.配置sqoop环境变量
3.将mysql驱动包mysql-connector-java-5.1.40.jar 拷贝到sqoop/lib 目录下
4.修改sqoop配置 文件: sqoop-env.sh
5.将 hive-common-2.3.3.jar包拷贝到hive的lib目录下 (需要用到hive时拷贝)
6.把java-json.jar添加到../sqoop/lib目录(解决NoClassDefFoundError: org/json/JSONObject报错)