千家信息网

大数据HIve数据仓库应用实例分析

发表于:2025-01-21 作者:千家信息网编辑
千家信息网最后更新 2025年01月21日,小编今天带大家了解大数据HIve数据仓库应用实例分析,文中知识点介绍的非常详细。觉得有帮助的朋友可以跟着小编一起浏览文章的内容,希望能够帮助更多想解决这个问题的朋友找到问题的答案,下面跟着小编一起深入
千家信息网最后更新 2025年01月21日大数据HIve数据仓库应用实例分析

小编今天带大家了解大数据HIve数据仓库应用实例分析,文中知识点介绍的非常详细。觉得有帮助的朋友可以跟着小编一起浏览文章的内容,希望能够帮助更多想解决这个问题的朋友找到问题的答案,下面跟着小编一起深入学习"大数据HIve数据仓库应用实例分析"的知识吧。

如今,大数据的大浪已经把我们每个人都卷入其中,随着大数据技术一起引起大众注意的还有HIve数据仓库。作为大数据分析的核心工具之一,它一直发挥着为企业提供决策支持的重要作用。因此掌握Hive是入门大数据学习的关键之一,下面我们就一起来看看HIve数据仓库应用案例讲解。

将本地文件数据加载到Hive数据仓库:

首先在/public/users/yexin/Hadoop/hadoopdata下建立文本文件:

Hive中建立表后只有两种方式可以加载数据:

(1)从本地文件系统加载数据

(2)从Hadoop文件系统加载数据

在node63节点启动hive服务:分别输入:hive --service metastore &;hive --service hiveserver2或直接输

入hiveserver2

在node70节点下输入hive登陆,执行如下操作,

创建表:

hive> CREATE TABLE score (

> sno int,name String,

> java decimal(10,2),

> python decimal(10,2))

> ROW FORMAT DELIMITED

> FIELDS TERMINATED BY '\t'

> LINES TERMINATED BY '\n'

> STORED AS TEXTFILE;

OK

Time taken: 0.429 seconds

导入数据:从本地系统文件按导入

Time taken: 0.429 seconds

hive> load data local inpath '/public/users/yexin/Hadoop/hadoopdata/score.txt' overwrite into table

score;

Loading data to table yexin.score

OK

Time taken: 1.413 seconds

查询score表:

查看HDFS数据:

查看元数据:

use hive;

删除表:drop tabel score? 记住删除表时HDFS上的数据一起删除了。

注意:如果建立的是外部表,drop后HDFS中的文件并没有删除

Beelin命令:

设置访问权限:修改hadoop的core-site.xml

用其他节点作为客户端,需要在node63节点配置hive2的监听节点端口,才能让远程访问hive服务(beeline)

vim hive-site.xml

添加:来绑定node70客户端访问 。这样远程就可以访问了。

hive.server2.thrift.bind.host

node70

hive.server2.long.polling.timeout

5000

在node70节点(hive的客户端)来连接HiveServer2(允许多个客户端并发操作)

输入:beeline进入beeline,输入:

!connect jdbc:hive2://node70:10000 yexin 12345

感谢大家的阅读,以上就是"大数据HIve数据仓库应用实例分析"的全部内容了,学会的朋友赶紧操作起来吧。相信小编一定会给大家带来更优质的文章。谢谢大家对网站的支持!

数据 仓库 文件 节点 输入 分析 应用 客户 客户端 实例 实例分析 朋友 系统 内容 文章 知识 跟着 问题 学习 帮助 数据库的安全要保护哪些东西 数据库安全各自的含义是什么 生产安全数据库录入 数据库的安全性及管理 数据库安全策略包含哪些 海淀数据库安全审计系统 建立农村房屋安全信息数据库 易用的数据库客户端支持安全管理 连接数据库失败ssl安全错误 数据库的锁怎样保障安全 计算机网络安全是啥专业 sql数据库密码过期 软件开发劳务派遣报价 倩女幽魂服务端数据库 网络上怎么学习软件开发 服务器开机鼠标能动点不开 维普数据库查重 机场场道工程危险源数据库模板 软件开发的售后服务是什么 沈阳国惠网络技术 gp数据库怎么增加加分区 商城软件开发合同范本 英雄联盟拳头服务器大概多久能好 织物瑕疵检测数据库 php用什么服务器好 转行做软件开发要学多久 怎样初始化用友数据库 护苗网络安全课堂视频之六 拼团商城软件开发 润迅服务器托管 软件开发人员进行二次开发 数据库技术论文3000 社保增员显示网络技术问题 计算机网络技术的发展历程 access数据库 密码 战地五为什么连接不上ea服务器 软件开发部部门组建都需要什么 无线网络技术导论整体认识 关于首席网络安全官的通知 lol加载不了服务器连接不上
0