Sqoop1如何导入导出
发表于:2024-09-28 作者:千家信息网编辑
千家信息网最后更新 2024年09月28日,这篇文章主要介绍Sqoop1如何导入导出,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!》Sqoop1 和 Sqoop2 的区别Sqoop1 由 Client 端直接接入 Had
千家信息网最后更新 2024年09月28日Sqoop1如何导入导出
这篇文章主要介绍Sqoop1如何导入导出,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!
》Sqoop1 和 Sqoop2 的区别
Sqoop1 由 Client 端直接接入 Hadoop,任务通过解析生成对应的 MR 执行
Sqoop1 仅有一个客户端,架构简单明了,部署即用,使用门槛比较低,但是耦合性强,用户密码暴露不安全
Sqoop2 服务端部署,运行,提供 Cli、rest api、webui 等入口,Connector 集中管理,RDBMS控制账户更安全,但是 Sqoop2 仅负责数据的读写操作,架构相对复杂
》Sqoop1导入(MySQL 导入到 HDFS)
注意:首先要启动MySQL、ZK、Hadoop
# demo1:table
# sqoop1 导入命令 mysql=>hdfsbin/sqoop import # mysql驱动类--driver com.mysql.cj.jdbc.Driver# 连接字符串 --connect jdbc:mysql://192.168.56.1/dbName?serverTimezone=GMT%2B8# 从哪张表导数据--table tbName# mysql账号 --username root# mysql 密码 --password 123456 --verbose # 目标目录(HDFS)--target-dir=/sqoop/a_users
# demo2:query
# 导入数据# --query和--table是互斥的;bin/sqoop import --connect jdbc:mysql://192.168.56.1/dbName?serverTimezone=GMT%2B8--username root --password 123456 --verbose # 获取记录条数--fetch-size 30 # SQL 语句# $CONDITIONS sql语句执行的条件,这个条件由sqoop自己控制--query 'select * from a_users where $CONDITIONS' # 按照 id 切分#--split-by;拆分的这一列不能重复,一般是主键--split-by id # 目标目录(HDFS)--target-dir=/sqoop/a_users
# demo3:将sqoop脚本封装在文件中
# 新建一个文件;(一行一个,使用#注释);文件名随便写import--connect jdbc:mysql://192.168.56.1/dbName?serverTimezone=GMT%2B8--username root--password 123456--verbose--fetch-size 30--query 'select * from a_users where $CONDITIONS'--split-by id--target-dir=/sqoop/a_users
执行Sqoop脚本文件的命令
bin/sqoop --options-file /root/fileName.txt
以上是"Sqoop1如何导入导出"这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注行业资讯频道!
文件
数据
安全
内容
命令
密码
条件
架构
目录
目标
篇文章
脚本
语句
控制
复杂
一行
价值
任务
入口
兴趣
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
开展网络安全周 税务局
南京正厚软件开发面试
调色软件开发
网络技术基础 胡远萍
mysql数据库 时间
互联网 科技创新中心
南京海航计算机网络技术服务优势
数据库系统语言
数据库常用的表达式有哪些
网络暴力算网络安全吗
进医院服务器
HiTV网络安全性更改
宝鸡市网络安全比赛
网络安全具有什么能力
2021网络安全宣传周时间推迟
怎么更改网关服务器
mvc 数据库查询数据库
数据库视图定义表
沧州软件开发优化价格
南沙点金互联网科技有限公司
魔卡幻想怎么连不上服务器
筑龙造价软件开发公司
傲发专业型传真服务器a812
服务器网站3什么名字
吉林数据库仪器仪表现货
即时通讯软件开发需要什么条件
数据库数值精度
linux搭建pxe服务器
eve超级血袭者数据库
数据库数据同步工具免费正式版