怎么进行hadoop2.x namenode ha 架构的原理分析
发表于:2024-11-26 作者:千家信息网编辑
千家信息网最后更新 2024年11月26日,怎么进行hadoop2.x namenode ha 架构的原理分析,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。在2.x版本的ha的架构
千家信息网最后更新 2024年11月26日怎么进行hadoop2.x namenode ha 架构的原理分析
怎么进行hadoop2.x namenode ha 架构的原理分析,相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。
在2.x版本的ha的架构图中
看以看到为了完成对两个NN的无缝切换,DN需要同时在Block信息发给两个NN,而NN之间需要做的是元数据信息的同步。
这里就涉及到同步的问题,共享存储。
在可靠性方面,在每一个NN上启动了DFSZKFailoverController来监听本地NN的运行状态,以便做出相应的判断处理。
而zookeeper就算为了实现一个分布式lock,防止同时出现两个active NN,以及一些数据的共享。
我们可以在看这幅比较原理基本的架构图。
可以看到每一个NN上,是有HADeamon进程,定时和DFSZKFailoverController的HealthMonitor进行心跳检测。
DFSZKFailoverController其中包含了ActiveStandbyElector来选举active以及standby。
元数据信息通过QJM来实时更新。
我们可以把standby NN看成是一个safemode下的NN,不提供对外服务,但是却可以更新相应的元数据信息修改,block数据上报更新等一系列操作。
看完上述内容,你们掌握怎么进行hadoop2.x namenode ha 架构的原理分析的方法了吗?如果还想学到更多技能或想了解更多相关内容,欢迎关注行业资讯频道,感谢各位的阅读!
数据
架构
信息
原理
两个
问题
更新
分析
内容
同时
方法
更多
同步
束手无策
为此
之间
分布式
原因
可靠性
实时
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
数据库VFR
小学网络安全宣传简报怎么写
曙光图数据库
美团核心数据库
shell 连接数据库日志
关于自制软件开发的书
沈阳软件开发人员工资
戴尔服务器e30s功率
怎么获取数据库的密码
数据库的统计怎么写
重庆移动服务器租用的注意要点
如何做云服务器租赁
无线网络技术配置
济南的大学哪些有软件开发专业
常见的关系数据库管理软件
桐乡梧桐冠成网络技术服务部
从数据库中导出数据表
中国临床案例成果数据库职称晋升
宜昌跑腿app软件开发
初中生网络安全教
打开数据库设计的命令
敏捷软件开发说法错误的是
关服务器需要停
天津服务器虚拟化哪家便宜
广西壮族自治区法律法规数据库
北斗在线服务器填什么
核酸数据库值钱吗
四川大学 数据库期中
清华同方超强服务器raid设置
php 数据库增删改查