Sqoop2如何安装配置
发表于:2025-02-03 作者:千家信息网编辑
千家信息网最后更新 2025年02月03日,这篇文章主要介绍了Sqoop2如何安装配置,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。一、安装hadoop略二、安装sqoop21.
千家信息网最后更新 2025年02月03日Sqoop2如何安装配置
这篇文章主要介绍了Sqoop2如何安装配置,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。
一、安装hadoop
略
二、安装sqoop2
1.选择对应的sqoop2
[hadoop@hftclclw0001 ~]$ pwd/home/hadoop[hadoop@hftclclw0001 ~]$ wget http://apache.mirrors.tds.net/sqoop/1.99.6/sqoop-1.99.6-bin-hadoop200.tar.gz[hadoop@hftclclw0001 ~]$ tar -zxvf sqoop-1.99.6-bin-hadoop200.tar.gz[hadoop@hftclclw0001 ~]$ cd sqoop-1.99.6-bin-hadoop200/server/conf/[hadoop@hftclclw0001 conf]$ pwd/home/hadoop/sqoop-1.99.6-bin-hadoop200/server/conf[hadoop@hftclclw0001 conf]$ ls -altotal 220drwx------ 2 hadoop root 4096 Oct 19 08:15 .drwx------ 10 hadoop root 4096 Oct 19 08:15 ..-rw------- 1 hadoop root 10636 Apr 29 2013 catalina.policy-rw------- 1 hadoop root 4590 Apr 29 02:41 catalina.properties-rw------- 1 hadoop root 1395 Apr 29 2013 context.xml-rw------- 1 hadoop root 3290 Apr 29 2013 logging.properties-rw------- 1 hadoop root 6528 Apr 29 02:41 server.xml-rw------- 1 hadoop root 1586 Apr 29 02:41 sqoop_bootstrap.properties-rw------- 1 hadoop root 7483 Apr 29 02:41 sqoop.properties-rw------- 1 hadoop root 1530 Apr 29 2013 tomcat-users.xml-rw------- 1 hadoop root 163769 Apr 29 2013 web.xml修改catalina.properties.将hadoop的jar包依赖进来。当然,如果还需要hive或是hbase,对应的jar包也要加入[hadoop@hftclclw0001 conf]$ vi catalina.propertiescommon.loader=${catalina.base}/lib,${catalina.base}/lib/*.jar,${catalina.home}/lib,${catalina.home}/lib/*.jar,${catalina.home}/../lib/*.jar,/home/hadoop/hadoop-2.2.0/share/hadoop/common/*.jar,/home/hadoop/hadoop-2.2.0/share/hadoop/common/lib/*.jar,/home/hadoop/hadoop-2.2.0/share/hadoop/yarn/*.jar,/home/hadoop/hadoop-2.2.0/share/hadoop/hdfs/*.jar,/home/hadoop/hadoop-2.2.0/share/hadoop/mapreduce/*.jar[hadoop@hftclclw0001 conf]$ vi sqoop.propertiesorg.apache.sqoop.submission.engine.mapreduce.configuration.directory=/home/hadoop/hadoop-2.2.0/etc/hadoop添加mysql driver mysql-connector-java-5.1.25-bin.jar 注意版本[root@hftclclw0001 lib]# pwd/home/hadoop/sqoop-1.99.6-bin-hadoop200/server/lib[root@hftclclw0001 lib]# ls -altotal 6284drwx------ 2 hadoop root 4096 Oct 19 08:33 .drwx------ 10 hadoop root 4096 Oct 19 08:15 ..-rw------- 1 hadoop root 15241 Apr 29 2013 annotations-api.jar-rw------- 1 hadoop root 54567 Apr 29 2013 catalina-ant.jar-rw------- 1 hadoop root 132134 Apr 29 2013 catalina-ha.jar-rw------- 1 hadoop root 1244212 Apr 29 2013 catalina.jar-rw------- 1 hadoop root 237615 Apr 29 2013 catalina-tribes.jar-rw------- 1 hadoop root 1801636 Apr 29 2013 ecj-4.2.2.jar-rw------- 1 hadoop root 33315 Apr 29 2013 el-api.jar-rw------- 1 hadoop root 112556 Apr 29 2013 jasper-el.jar-rw------- 1 hadoop root 527739 Apr 29 2013 jasper.jar-rw------- 1 hadoop root 76691 Apr 29 2013 jsp-api.jar-rw------- 1 hadoop root 848401 Oct 19 08:33 mysql-connector-java-5.1.25-bin.jar-rw------- 1 hadoop root 88575 Apr 29 2013 servlet-api.jar-rw------- 1 hadoop root 8821 Apr 29 02:41 sqoop-tomcat-1.99.6.jar-rw------- 1 hadoop root 776946 Apr 29 2013 tomcat-coyote.jar-rw------- 1 hadoop root 253635 Apr 29 2013 tomcat-dbcp.jar-rw------- 1 hadoop root 70014 Apr 29 2013 tomcat-i18n-es.jar-rw------- 1 hadoop root 51903 Apr 29 2013 tomcat-i18n-fr.jar-rw------- 1 hadoop root 54511 Apr 29 2013 tomcat-i18n-ja.jar
2.启动
[root@hftclclw0001 bin]# pwd/home/hadoop/sqoop-1.99.6-bin-hadoop200/bin[root@hftclclw0001 bin]# ./sqoop2-server startSqoop home directory: /home/hadoop/sqoop-1.99.6-bin-hadoop200Setting SQOOP_HTTP_PORT: 12000Setting SQOOP_ADMIN_PORT: 12001Using CATALINA_OPTS: Adding to CATALINA_OPTS: -Dsqoop.http.port=12000 -Dsqoop.admin.port=12001Using CATALINA_BASE: /home/hadoop/sqoop-1.99.6-bin-hadoop200/serverUsing CATALINA_HOME: /home/hadoop/sqoop-1.99.6-bin-hadoop200/serverUsing CATALINA_TMPDIR: /home/hadoop/sqoop-1.99.6-bin-hadoop200/server/tempUsing JRE_HOME: /usrUsing CLASSPATH: /home/hadoop/sqoop-1.99.6-bin-hadoop200/server/bin/bootstrap.jar
3. UI 访问 {ip}:12000
http://hftclclw0001:12000/
4.客户端访问
[hadoop@hftclclw0001 sqoop-1.99.6-bin-hadoop200]$ ./bin/sqoop2-shell Sqoop home directory: /home/hadoop/sqoop-1.99.6-bin-hadoop200Oct 19, 2015 8:39:47 AM java.util.prefs.FileSystemPreferences$1 runINFO: Created user preferences directory.Sqoop Shell: Type 'help' or '\h' for help.sqoop:000> sqoop:000>
感谢你能够认真阅读完这篇文章,希望小编分享的"Sqoop2如何安装配置"这篇文章对大家有帮助,同时也希望大家多多支持,关注行业资讯频道,更多相关知识等着你来学习!
篇文章
配置
价值
兴趣
同时
客户
客户端
更多
朋友
版本
知识
编带
行业
资讯
资讯频道
频道
参考
学习
帮助
支持
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
大学软件开发与测试
广电网络技术维护部工作思路
mc服务器cpu内存
设计一个数据库步骤
软件开发视频审核功能
软件开发中的各种英文
软件开发流程和角色
max服务器管理
中山市券鱼网络技术有限公司
安全 服务器密码维护
催生网络安全生态
JAVA数据库在线聊天系统
传趣网络技术有限公司怎么样
狮山软件开发培训
上海发展软件开发现价
国内做得好的网络安全厂商有哪些
辽宁库存管理软件开发
用户角色权限管理数据库表
代理服务器共享连接
优化服务器的链接数
cs go kz服务器
随州专业的软件开发方案
云谷网网络安全证书有问题
北京会计软件开发热线
贺州定制软件开发
软件开发和java一样吗
易兴软件开发
池州学院c语言考试服务器是什么
把管理系统放在云服务器
腾科互联网科技有什么用