背景（不感兴趣可以跳过背景介绍）配置 Ubantu20.04 jdk1.8.0_221 hadoop3.3.1 hive3.1.3 三台虚拟机搭建Hadoop集群在安装hive的过程中，初始化数据库成功后（mysql），输入命令:./bin/hive启动hive时出错（忘记截图了）。后发现原因是hive3.x仅支持JDK1.8，并不支持openJDK11，尽管hadoop3.3.x是支持JDK1.8和openJDK11的。当降低JDK版本后启动集群，便出现启动yarn的错误：CannotsetpriorityofresourcemanagerprocessxxxCannotsetpriorit
背景（不感兴趣可以跳过背景介绍）配置 Ubantu20.04 jdk1.8.0_221 hadoop3.3.1 hive3.1.3 三台虚拟机搭建Hadoop集群在安装hive的过程中，初始化数据库成功后（mysql），输入命令:./bin/hive启动hive时出错（忘记截图了）。后发现原因是hive3.x仅支持JDK1.8，并不支持openJDK11，尽管hadoop3.3.x是支持JDK1.8和openJDK11的。当降低JDK版本后启动集群，便出现启动yarn的错误：CannotsetpriorityofresourcemanagerprocessxxxCannotsetpriorit
一、简介NodeManager（NM）中的状态机分为三类：Application、Container和LocalizedResource，它们均直接或者间接参与维护一个应用程序的生命周期。当NM收到某个Application的第一个container启动命令时，它会创建一个「Application状态机」来跟踪该应用程序在该节点的状态；每个container都有一个独立的「container状态机」；Application运行所需资源（jar，文件等）的下载过程则由「LocalizedResource状态机」维护和跟踪。二、三类状态机一）Application状态机NM上的Applicatio
一、简介NodeManager（NM）中的状态机分为三类：Application、Container和LocalizedResource，它们均直接或者间接参与维护一个应用程序的生命周期。当NM收到某个Application的第一个container启动命令时，它会创建一个「Application状态机」来跟踪该应用程序在该节点的状态；每个container都有一个独立的「container状态机」；Application运行所需资源（jar，文件等）的下载过程则由「LocalizedResource状态机」维护和跟踪。二、三类状态机一）Application状态机NM上的Applicatio
解决方案：cd/opt/module/hadoop-3.1.3/etc/hadoop/vimyarn-site.xml增加以下一段代码 yarn.nodemanager.resource.memory-mb 1024 yarn.nodemanager.resource.cpu-vcores 1 原理nodemanager要求的内存最低1024MB以及运行时cpu数量记得重启集群stop-all.sh,start-all.sh就可以了 验证其他的也正常了
解决方案：cd/opt/module/hadoop-3.1.3/etc/hadoop/vimyarn-site.xml增加以下一段代码 yarn.nodemanager.resource.memory-mb 1024 yarn.nodemanager.resource.cpu-vcores 1 原理nodemanager要求的内存最低1024MB以及运行时cpu数量记得重启集群stop-all.sh,start-all.sh就可以了 验证其他的也正常了
本节开始将对Yarn中的NodeManager服务进行剖析。NodeManager需要在每个计算节点上运行，与ResourceManager和ApplicationMaster进行交互。管理节点的计算资源以及调度容器。后续将对NM的功能职责、状态机、容器生命周期和资源隔离等方面进行讲解。本篇将从整体上对NM进行介绍。一、NodeManager基本职能在Hadoop集群中，每个计算节点都需要有一个管理服务，其就是NodeManager（NM）。它负责与ResourceManager保持通信，管理Container的生命周期，监控每个Container的资源使用情况，追踪节点健康状况，管理日志等。
本节开始将对Yarn中的NodeManager服务进行剖析。NodeManager需要在每个计算节点上运行，与ResourceManager和ApplicationMaster进行交互。管理节点的计算资源以及调度容器。后续将对NM的功能职责、状态机、容器生命周期和资源隔离等方面进行讲解。本篇将从整体上对NM进行介绍。一、NodeManager基本职能在Hadoop集群中，每个计算节点都需要有一个管理服务，其就是NodeManager（NM）。它负责与ResourceManager保持通信，管理Container的生命周期，监控每个Container的资源使用情况，追踪节点健康状况，管理日志等。
本节开始将对Yarn中的NodeManager服务进行剖析。NodeManager需要在每个计算节点上运行，与ResourceManager和ApplicationMaster进行交互。管理节点的计算资源以及调度容器。后续将对NM的功能职责、状态机、容器生命周期和资源隔离等方面进行讲解。本篇将从整体上对NM进行介绍。一、NodeManager基本职能在Hadoop集群中，每个计算节点都需要有一个管理服务，其就是NodeManager（NM）。它负责与ResourceManager保持通信，管理Container的生命周期，监控每个Container的资源使用情况，追踪节点健康状况，管理日志等。
本节开始将对Yarn中的NodeManager服务进行剖析。NodeManager需要在每个计算节点上运行，与ResourceManager和ApplicationMaster进行交互。管理节点的计算资源以及调度容器。后续将对NM的功能职责、状态机、容器生命周期和资源隔离等方面进行讲解。本篇将从整体上对NM进行介绍。一、NodeManager基本职能在Hadoop集群中，每个计算节点都需要有一个管理服务，其就是NodeManager（NM）。它负责与ResourceManager保持通信，管理Container的生命周期，监控每个Container的资源使用情况，追踪节点健康状况，管理日志等。
