OOM 机制

最新推荐文章于 2024-08-09 16:31:12 发布
原创 最新推荐文章于 2024-08-09 16:31:12 发布 · 640 阅读 · 0 ·
CC 4.0 BY-SA版权
HINZER版权所有，转载请标明出处。
文章标签：

#Linux #OOM

文章介绍了Linux内核的OOM（OutofMemory）管理机制，包括同步与异步回收、内存规整、文件页与匿名页的区别、页帧回收以及OOMKiller的触发。当物理内存耗尽时，系统会尝试通过各种手段回收内存，如kswapd线程和内存规整，最后才启动OOMKiller杀死进程来释放资源。在Android中，LMKD进程在OOM发生前先执行进程查杀。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

OOM 机制

“我们从OOM的角度来帮大家提高一点内存方面的知识，虽然不能说帮助人们来完全解决内存问题，但是也能从一个侧面来提高大家分析内存问题相关的能力。”

这是关于 Linux 内核的学习笔记，重点要了解 OOM 这块的相关知识点。

1 相关概念

1.1 同步回收 VS 异步回收

  • 同步回收：直接调用函数进行回收
  • 异步回收：通过唤醒回收线程 kswapd 处理

1.2 内存规整

  • 将不连续的物理页变成连续的物理页，目的在于减少页之间的外部碎片，空出"更大"的物理内存

1.3 文件页和匿名页

  • 文件页：有后备存储文件，对应text data段上的页帧
  • 匿名页：swap 作为后备存储，对应堆栈上的页帧

1.4 页帧回收

  • 如果内存规整分配不到内存，使用页帧回收进行分配。首先考虑 clean 的文件页，如果可释放的空间不足以满足，其次考虑 dirty 的文件页或者匿名页

1.5 OOM Killer

  • 如果页帧回收也分配不出内存，剩下一个方式就是 OOM Killer 了。通俗来讲是查杀进程来释放内存资源

1.6 kswapd 线程

  • 异步回收线程 kswapd，这个线程被周期性唤醒，来执行内存回收任务。每个 node 会有一个专用的 kswapd 线程
  • kswapd 执行完成后会唤醒 kcompactd 执行，进行内存规整将 free 内存尽量连成一片

2 理解OOM

  • 内存耗尽的意思，这里根据虚拟内存空间和物理内存空间，有两个区分：虚拟内存 OOM 和物理内存 OOM
  • 虚拟内存 OOM：用户态进程申请内存，但还没有使用。实际上没有分配物理内存和映射页表，指虚拟内存空间
  • 物理内存 OOM：用户和进程有分配物理内存的场景，如果物理内存不足也会 OOM

2.1 内存分配策略

对于虚拟内存 OOM， Linux 内核提供三种策略，决定最多可分配内存空间大小

#define OVERCOMMIT_GUESS   0
#define OVERCOMMIT_ALWAYS  1
#define OVERCOMMIT_NEVER   2

2.2 内存管理策略

对于物理内存 OOM，当系统发现没有足够的物理内存时，各种手段（内存规整，页帧回收，kswapd线程）用尽，会使用 OOM Killer 来查杀进程来释放空间

3、在android中实现了lmkd进程，它会在OOM之前查杀进程，LMK有依赖OOM Killer的部分，但运行起来是独立的（共同作用回收内存，LMK在前，OOM Killer在后）

3 参考文献

Linux内存管理（69）：内核OOM机制详解
私房菜
10-19 1843
在 buddy系统慢速分配 一文中，我们分析了从快速分配流程无法分配到内存之后，会进入慢速分配流程。通过降低水位等方式修改 alloc_flags，尝试唤醒kswapd，并尝试再次分配；修改ac 的nodemask，并再次尝试分配；直接内存回收之后的尝试分配；直接内存规整之后的尝试分配；reclaim retry、compact retry 之后的尝试分配；如果经过这些努力之后还是无法分配到内存时，内核采取最后的极端分配：OOM。
linux环境OOM机制入门
xianweijian的博客
06-29 510
Linux中malloc返回非空指针，并不一定意味着指向的内存就是可用的，Linux下允许程序申请比系统可用内存更多的内存，这个特性叫Overcommit。这样做是出于优化系统考虑，因为不是所有的程序申请了内存就立刻使用的，当你使用的时候说不定系统已经回收了一些资源了。Linux下有3种Overcommit的策略（参考内核文档：vm/overcommit-accounting），可以在/proc/sys/vm/overcommit_memory配置。取0,1和2三个值，默认是0。
对OOM的理解
zhujm320的专栏
06-27 871
什么是OOM？ oom(out of memory)是应用在申请分配内存时，系统无法分配足够的内存时出现。 OOM出现的原因 内存泄漏(对象生命周期不一致导致，长生命周期的对象持有短生命周期的对象，导致无法释放) 内存溢出(需要分配的内存，超过了系统需要，比如分配了1M内存，到时实际操作却操作了1M以外的内存) 碎片内存太多，连续完整的内存少 大型app确实需要消耗大量内存 文件句柄超出限制 线程数量超出限制 OOM解决方案 ...
Linux内核OOM机制分析
weixin_34405354的博客
07-06 319
最近在工作中遇到下面的问题：active_anon:16777 inactive_anon:13946 isolated_anon:0active_file:14 inactive_file:37 isolated_file:0unevictable:0 dirty:0 writeback:0 unstable:0free:2081 slab_reclaimable:299 ...
oom 机制
qazw9600的专栏
04-25 2635
说明 在linux系统上有时内核打印会出现oom信息，并伴随着某个进程被kill掉，在嵌入式设备等低内存设备上容易出现。 理解 oom 是"out of memry"的缩写，意思是内存资源不足，打印该信息的是操作系统内核中用来保证操作系统在内存不足情况下自身正常运行的一种机制。 该机制会时刻给进程评分，当系统可用物理内存低于内核预设阈值时，会kill掉一些评分较高的进程来释放内存，保证操作系...
OOM机制
zion--6135的博客
07-20 1718
当系统可用内存（不包含buffer和cache）小于这个值的时候，系统会启动内核线程kswapd来对内存进行回收。而还是触发了oomkiller，则表明内存真的不够用了或者在内存回收前或者回收中直接触发了oomkiller。内核中sysctl_panic_on_oom变量是和/proc/sys/vm/panic_on_oom对应的，可通过如下命令查看。系统所保留空闲内存的最低限/proc/sys/vm/min_free_kbytes参数。(1)谁触发了OOM就干掉谁。(2)谁最“坏”就干掉谁。.......
Linux内核OOM机制的详细分析
厚积薄发的博客
12-21 1314
Linux内核根据应用程序的要求分配内存，通常来说应用程序分配了内存但是并没有实际全部使用，为了提高性能，这部分没用的内存可以留作它用，这部分内存是属于每个进程的，内核直接回收利用的话比较麻烦，所以内核采用一种过度分配内存（over-commit memory）的办法来间接利用这部分“空闲”的内存，提高整体内存的使用效率。一般来说这样做没有问题，但当大多数应用程序都消耗完自己的内存的时候麻烦就来了...
一文分析Linux内核OOM机制（值得收藏）
m0_74282605的博客
12-07 1108
Linux内核根据应用程序的要求分配内存，通常来说应用程序分配了内存但是并没有实际全部使用，为了提高性能，这部分没用的内存可以留作它用，这部分内存是属于每个进程的，内核直接回收利用的话比较麻烦，所以内核采用一种过度分配内存（over-commit memory）的办法来间接利用这部分“空闲”的内存，提高整体内存的使用效率。一般来说这样做没有问题，但当大多数应用程序都消耗完自己的内存的时候麻烦就来了，因为这些应用程序的内存需求加起来超出了物理内存（包括swap）的容量，内核（OOM killer）必须杀掉一些
linux内核oom,Linux内核OOM机制的详细分析
weixin_42511832的博客
05-01 3545
Linux内核有个机制叫OOMkiller(Out-Of-Memorykiller)，该机制会监控那些占用内存过大，尤其是瞬间很快消耗大量内存的进程，为了防止内存耗尽而内核会把该进程杀掉。典型的情况是：某天一台机器突然ssh远程登录不了，但能ping通，说明不是网络的故障，原因是sshd进程被OOMkiller杀掉了(多次遇到这样的假死状况)。重启机器后查看系统日志/var/log/mes...
Linux OOM机制详解
langzi989的专栏
04-01 1828
Linux OOM机制说明 在工作过程中，你可能会遇到过这种情况，程序在运行一段时间之后突然挂掉，在你保证程序在正常情况下不会挂掉的情况下，程序挂掉的原因可能是在你的程序运行过程中，有一段时间你的程序运行内存过大，而此时系统物理内存不足，导致系统触发OOM killer机制，将该进程kill。 1、OOM killer机制 OOM killer是out-of-memory killer的缩写，...
Linux kernel OOM机制详解
专注于系统快稳省领域
08-09 2570
OOM机制（Out of Memory Killer）是Linux内核中的一种内存管理机制，用于在系统物理内存耗尽时选择并杀死一个或多个进程，以释放内存并防止系统崩溃。当系统无法满足新的物理内存分配请求，并且所有其他内存回收机制（如内存规整、页帧回收等）都失败时，OOM Killer会被触发。
Linux OOM机制介绍
czmmiao的专栏
06-06 3131
  Linux系统运行过程中，有时候会在message中看到Out of memory，并kill某个进程的信息。这篇文章讲的就是OOM机制的原理以及其核心配置参数。 内核版本基于centos6使用的linux-2.6.32。 OOM(Out Of Memory)机制为Linux内核中一种自我保护机制，当系统分配不出内存时(触发条件)会触发这个机制，由系统在已有进程中挑选一个占用内存较多，...
linux下的OOM机制
渀波儿灞
09-05 366
OOM(Out Of Memory)机制为Linux内核中一种自我保护机制，当系统分配不出内存时(触发条件)会触发这个机制，由系统在已有进程中挑选一个占用内存较多，回收内存收益最大的进程杀掉来释放内存。 参考：http://blog.chinaunix.net/uid-29634482-id-5127275.html ...
什么是OOM，为什么会OOM及一些解决方法
pan_junbiao的博客
07-03 3234
OOM，全称“Out Of Memory”，翻译成中文就是“内存用完了”，来源于java.lang.OutOfMemoryError。看下关于的官方说明： Thrown when the Java Virtual Machine cannot allocate an object because it is out of memory, and no more memory could be made available by the garbage collector. 意思就是说，当JVM因为没有足够的
第235天学习打卡（知识点回顾 对OOM的认识）
doudoutj的博客
08-31 109
知识点总结 对OOM的认识 stackOverflowError 递归调用，方法特别多。把栈空间撑破了 OutOfMemoryError: java heap space: 对象太多把堆撑破了 OutOfMemoryError:GC overhead limit exceeded ：GC回收时间过长时会抛出OutOfMemoryError。过长的定义是，超过98%的时间用来做GC并且回收了不到2%的堆内存。连续多次GC都只回收了不到2%的极端情况下才会抛出。假如不抛出GC overhead limit错误
记一次oom_kill的排查
howesao的专栏
01-17 1190
在开发出现过算法进程占用最高的内存而系统发现oom时被kill，通过排查，发现主要原因不在于应用程序，虽然应用有些迹象出现内存泄露，但泄露很小或因系统内存回收延时，真正的原因出现于系统的交换分区的配置上： 系统情况：nx板子，4~6核，8G内存，ssd，128G，ubuntu系统 应用情况：rabbitmq，python、qt做的界面系统，算法 外设情况：连接布控球（摄像头） 网络情况：ap-wifi,eth0预留，eth1连接布控球 内存情况：物理内存：8G , swap分区：4个zram[0-
安卓 oom机制
最新发布
03-22
### 什么是OOM？ 在Android开发中，OOM代表“Out Of Memory”，即内存不足异常。当应用尝试分配更多内存而系统无法提供足够的可用内存时，就会抛出`OutOfMemoryError`[^1]。 --- ### 为什么会发生OOM？ 尽管...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

hinzer

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值