千家信息网

HADOOP YARN(一)

发表于:2025-02-01 作者:千家信息网编辑
千家信息网最后更新 2025年02月01日,HADOOP YARN是什么? Yarn全称是Yet Another Resource Negotiator(资源管理器)基本概念Container容器是Yarn对资源的一层抽象。(CP
千家信息网最后更新 2025年02月01日HADOOP YARN(一)

HADOOP YARN是什么?

        Yarn全称是Yet Another Resource Negotiator(资源管理器)

基本概念

Container容器是Yarn对资源的一层抽象。(CPU核数,内存等计算资源)容器由NodeManager启动和管理,并被它所监控容器由ResureceManager调度ResourceManager(RM)负责资源管理,包含定时调度器(scheduler)和应用管理器(ApplicationManager)调度器向分配资源,应用管理器监控应用程序。ApplicationMaster每提交一个作业,Appmaster向Resourcemanager申请资源,获得资源后将运行的程序发送到容器启动。(数据不动,程序动)Nodemanager负责容器的管理,监控资源的使用情况,向ResourceManager提供资源的使用报告。

程序提交流程

1.  Client向Yarn提交Application2.  ResourceManager向NodeManager通信,为Appmaster分配第一个容器3.  Appmaster对作业进行拆分,向ResourceManager申请容器4.  Appmaster与NodeManager通信,将作业分发到容器中。5.  容器向Appmaster发送心跳6.  程序结束,Appmaster向ResourceManager注销资源
资源 容器 管理 程序 作业 应用 监控 调度 资源管理 分配 通信 全称 内存 应用程序 情况 报告 数据 核数 概念 流程 数据库的安全要保护哪些东西 数据库安全各自的含义是什么 生产安全数据库录入 数据库的安全性及管理 数据库安全策略包含哪些 海淀数据库安全审计系统 建立农村房屋安全信息数据库 易用的数据库客户端支持安全管理 连接数据库失败ssl安全错误 数据库的锁怎样保障安全 政府绩效考核软件开发 安徽计算机软件开发要多少钱 苏州英奇互联网科技 连接数据库显示对象名字无效 无锡自动化网络技术标准 石家庄软件开发模型 怀柔区信息网络技术推广好处 数据库中实现排序的子句是 本茗互联网科技公司 马赛克数据库恢复所使用的命令是 数据库导入到另一个sql 浪潮服务器 ibm服务器 自考本科计算机网络技术课本 取数据库表中的字段值 软件开发设计公司税收优惠 数据库插入记录查询 服务器多人生存模组 网络技术对零售业的影响 2022电大数据库运维 慈溪哪里有做软件开发的 网络安全与防护项目 数据库对象迁移有哪些对象 郑州安卓应用软件开发公司哪个好 官兵网络安全形势认识 群聊数据库表 计算机网络技术及运用教材 网络安全承诺书的意义 自动化时序数据库 网易电脑服务器怎么添加模组 阿里云服务器添加域名解析
0