NodeManager节点启动报错内存不足 NodeManager from master doesn't satisfy minimum allocations
来源:互联网 发布:淘宝 激活码 编辑:程序博客网 时间:2024/05/29 16:04
启动hadoop后jps存在nodemanager进程,但马上会报错中断进程
查看日志后发现报的是启动nodemanager 所需内存不足
2017-09-27 18:25:11,244 INFO org.apache.hadoop.service.AbstractService: Service NodeManager failed in state STARTED; cause: org.apache.hadoop.yarn.exceptions.YarnRuntimeException: org.apache.hadoop.yarn.exceptions.YarnRuntimeException: Recieved SHUTDOWN signal from Resourcemanager ,Registration of NodeManager failed, Message from ResourceManager: NodeManager from master doesn't satisfy minimum allocations, Sending SHUTDOWN signal to the NodeManager.
按照查来的方法修改 yarn-site.xml 中的yarn.scheduler.minimum-allocation-mb 内存大于1024,表示该节点上YARN可使用的物理内存总量,默认是8192(MB),注意,如果你的节点内存资源不够8GB,则需要调减小这个值,而YARN不会智能的探测节点的物理内存总量。
<property> <name>yarn.nodemanager.resource.memory-mb</name> <value>1024</value></property>
不起作用,还有的说法是修改修改 yarn-env.sh 中 JAVA_HEAP_MAX=-Xmx3072m 改为3G
但是也是不起作用的
我架设的虚拟机是1g内存1CPU1核的
在yarn-site.xml添加
<property> <name>yarn.nodemanager.resource.cpu-vcores</name> <value>1</value> </property>
表示该节点上YARN可使用的虚拟CPU个数,默认是8,注意,目前推荐将该值设值为与物理CPU核数数目相同。如果你的节点CPU核数不够8个,则需要调减小这个值,而YARN不会智能的探测节点的物理CPU总数。
终于能够成功启动!!
阅读全文
1 0
- NodeManager节点启动报错内存不足 NodeManager from master doesn't satisfy minimum allocations
- NodeManager启动报错
- nodemanager节点报错Unexpected error starting NodeStatusUpdater
- CDH5.5启动Yarn的NodeManager报错
- hadoop节点nodemanager启动失败原因小结~
- hadoop节点nodemanager启动失败原因
- nodemanager启动报Cannot convert identity certificate
- weblogic11g 节点管理器 nodemanager
- Weblogic 节点管理器 nodemanager
- NodeManager代码分析之NodeManager启动过程
- NodeManager代码分析之NodeManager启动过程
- NodeManager启动错误
- NodeManager启动不起来
- hadoop启动没有nodemanager
- hadoop nodemanager 没有启动
- nodemanager启动失败
- nodemanager无法启动问题
- 启动节点管理器错误weblogic.nodemanager.common.ConfigException
- Qt 学习之路 2(42):QListWidget、QTreeWidget 和 QTableWidget
- aa
- 类初始化过程详解
- SQL查询分页分页(SQL语法系列)
- 创建一个指定大小格式的文件
- NodeManager节点启动报错内存不足 NodeManager from master doesn't satisfy minimum allocations
- split,splice,slice,substr,substring使用方法总结
- uefi windows10 ubuntu双系统
- 一线架构师实践指导 电子书分享
- W/System.err(1437): android.os.NetworkOnMainThreadException
- theano.function中input和givens
- WIT事例
- 设置PL/SQL工具SQL窗口的字体大小及颜色
- 网页基础