OOM killer

今天服务器OOM告警，准备ssh登上去看看服务日志，找找内存泄漏位置。然后一直ssh不成功，最后网上搜了一下，发现可能触发了OOM killer机制，选择性的kill掉一些进程，这就有可能会kill掉sshd，这样就会导致ssh登不上。

Linux下有一种OOM KILLER 的机制，它会在系统内存耗尽的情况下，启用自己算法有选择性的kill 掉一些进程。

一、为什么会有OOM killer

      当我们使用应用时，需要申请内存，即进行malloc的操作，进行malloc操作如果返回一个非NULL的操作表示申请到了可用的内部你。事实上，这个地方是可能存在bug的。Linux有一种内存优化机制，即：允许程序申请比系统可用内存更多的内存（术语：overcommit），但是Linux并不保证这些内存马上可用，如果凑巧你申请到的内存中在你需要使用的时候还没有完全释放出来，这个时候就会触发OOM killer了。内核代码为：mm/oom_kill.c，其调用顺序为：

malloc -> _alloc_pages -> out_of_memory() -> select_bad_process() -> badness()

 

二、如何选择要kill掉的进程

重点分析badness代码，可以参考附件代码，我看了个大概：

1）计算该进程以及其子进程所占用的内存；

2）计算CPU时间和存活时间

3）做相应的权重调整

总结起来，就是占用内存越高，得分越高，cpu时间和存活时间越高，得分越低；进程优先级越高，得分越低

综合上述因素后，会得到一个point的值，得分最高的会被选中，然后被kill掉。

 

系统日志文件相关：

/var/log/messages

 

/proc/pid/oom_score

/proc/pid/oom_adj