datasketches如何辅助Hive计算分位数
发表于:2024-09-30 作者:千家信息网编辑
千家信息网最后更新 2024年09月30日,这篇文章主要为大家展示了"datasketches如何辅助Hive计算分位数",内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下"datasketches如何辅助
千家信息网最后更新 2024年09月30日datasketches如何辅助Hive计算分位数
这篇文章主要为大家展示了"datasketches如何辅助Hive计算分位数",内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下"datasketches如何辅助Hive计算分位数"这篇文章吧。
1. 将下面三个jar包添加进hive的hive.aux.jars.path目录里面
org.apache.datasketches datasketches-hive 1.1.0-incubating org.apache.datasketches datasketches-java 1.3.0-incubating org.apache.datasketches datasketches-memory 1.2.0-incubating
2. 打开hive客户端,执行添加jar包命令,将3个jar包添加进去
add jar xxx.jar
3. 创建函数,以求double类型的四分位数为例
创建函数q1,对应的类为org.apache.datasketches.hive.quantiles.DataToDoublesSketchUDAF,q1的作用是将一个group的数据聚合在一起,
创建函数q2,类为org.apache.datasketches.hive.quantiles.GetQuantileFromDoublesSketchUDF,将q1的结果作为q2的输入参数,并传入一个位置参数,例如0.25表示求下四分位数。
hive创建函数语句:
create [temporary] function [dbname.]function_name AS 'class_name';
在sql中使用自定义的两个函数即可求出一组数据中的分位数。
以上是"datasketches如何辅助Hive计算分位数"这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注行业资讯频道!
位数
函数
辅助
内容
篇文章
参数
数据
学习
帮助
三个
两个
位置
作用
命令
客户
客户端
易懂
更多
条理
目录
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
1000万软件开发项目
小的数据库
固原软件开发规定
微信服务器存储空间有多少
笔记本装火鸟数据库如何打开
不用实名认证云服务器
服务器安全告警
武汉做金融软件开发的公司
教育网络技术学院
用友服务器管理工具下载
首都网络安全日的主题
数据库接口与图形类型的区别
腾讯云云服务器计算类型的分类
网络安全日常检查项目
网络安全技能竞赛现状
家用服务器怎么连接显示屏
象山计算机软件开发平台
如何查看网站服务器地址
网络安全查询对方ip地址
长沙澳博软件开发有限公司地址
安仁学it软件开发工资多少
php后台密码数据库
免费服务器安全防护软件
北京自动化项目管控软件开发平台
网络安全初赛开赛
护苗网络安全课教育总结
sql 数据库实例
重庆塔式服务器哪家好
文献检索可以用到哪些数据库
杭州大诚网络技术有限公司