HDFS架构如何设计
发表于:2024-10-23 作者:千家信息网编辑
千家信息网最后更新 2024年10月23日,这篇文章主要介绍HDFS架构如何设计,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!HDFS架构设计:1.NN(NameNode):主要是维护管理文件命名空间,其中包括了文件名称
千家信息网最后更新 2024年10月23日HDFS架构如何设计
这篇文章主要介绍HDFS架构如何设计,文中介绍的非常详细,具有一定的参考价值,感兴趣的小伙伴们一定要看完!
HDFS架构设计:
1.NN(NameNode):主要是维护管理文件命名空间,其中包括了文件名称,文件的权限,创建时间,副本数,文件被分成多少块,快分布在哪些机器(产生文件fsimage和editlog)。
2.理解NN管理下NN和块以及实际存储内容的存储关系。
实例:假设NN为一个容量为128000ML的正方形盒子,每个块为同样大小正正方方的容量为128ML的盒子,但是每个盒子里只有3ml的水(每个块中存储文件的实际大小)。
则问实际存储的内容是多少ml?3*(128000/128)=3000ml这里是由DN管理存储的。
放进去的盒子是多少个?1000个(其实就是存储的块的数量)
总的来说尽管实际存储只有3000ml,但是却消耗了1000个瓶子的名字的字节总和的NN的空间,但是如果把1000个瓶子压缩成500或者更少(小文件合并),则可以消耗更少量的NN管理空间。
3.DN(DataNode):存储数据块,存储数据块校验和。
4.SN(SecondaryNode):做每小时的检查工作checkpoint。(检查NN的工作即产生文件fsimage和editlog并进行打包制作成新的fsimage文件保存下来)
图理解:
以上是"HDFS架构如何设计"这篇文章的所有内容,感谢各位的阅读!希望分享的内容对大家有帮助,更多相关知识,欢迎关注行业资讯频道!
文件
存储
内容
实际
盒子
管理
架构
设计
空间
只有
大小
容量
数据
瓶子
篇文章
工作
检查
消耗
正正
价值
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
交行软件开发部章万峰
陇西智荣网络技术公司
tp5.2查询数据库
万科国际网络技术有限公司
数据库管理系统核心部分
数据库的外键约束
火影忍者手游1417服务器
科技公司互联网战略转型
池州软件开发外包公司
激活手机时应用与数据库
网络安全链条app
医疗与网络安全
山东落实网络安全法
数据库异常抛到了前端
景融服务器
scimore数据库
怎样快速学会电脑网络技术
联想g4服务器亮黄灯怎么回事
沈阳数据库登录
无线网络技术 应用
工业控制网络安全管理制度
软件开发售后服务协议书
南岸区全过程软件开发服务代理商
查询星环数据库所有表
本地数据库与微信连接
四川网络安全培训课程
网络安全内容说课
无锡网络安全准入控制系统哪家好
湖南游戏软件开发价格
信息网络安全监察就业