网易首页 > 网易号 > 正文 申请入驻

趣味图解 | 什么是缺页错误 Page Fault?

0
分享至

来源 | 后端技术指南针

号外号外

各位老铁,大家好!

最近在想如何让大家在10分钟中有所收获,写一些精悍的知识点。

先抛一道阿里面试题给大家热热身,引出今天的主角-缺页异常Page Fault。

谈谈对缺页异常Page Fault的理解。

话不多说,集合上车。

术语约定

  • VA:Virtual Address 虚拟地址

  • PA:Physical Address 物理地址

  • MMU:Memory Manage Unit 内存管理单元

  • TLB:Translation Lookaside Buffer 旁路快表缓存/地址变换高速缓存

  • PTE:Page Table Entry 分页表项


内存的惰性分配

以32位的Linux系统为例,每个进程独立拥有4GB的虚拟地址空间,根据局部性原理没有必要也不可能为每个进程分配4GB的物理地址空间。

64位系统也是一样的道理,只不过空间寻址范围大了很多很多倍,进程的虚拟地址空间会分为几个部分:

实际上只有程序运行时用到了才去内存中寻找虚拟地址对应的页帧,找不到才可能进行分配,这就是内存的惰性(延时)分配机制。

对于一个运行中的进程来说,不是所有的虚拟地址在物理内存中都有对应的页,如图展示了部分虚拟地址存在对应物理页的情况:

虚拟地址空间根据固定大小一般是4KB进行划分,物理内存可以设置不同的页面大小,通常物理页大小和虚拟页大小是一样的,本文按照物理页4KB大小展开。

经过前面的分析,我们将面临一个问题:如何将虚拟地址准确快速地映射到物理页呢?

>>>高能预警 敲黑板 本段小结<<< 1. Linux的虚拟地址空间就是空头支票,看着很大但是实际对应的物理空间只有很少的一部分。 2.内存的惰性分配是个有效的机制,可以保证内存利用率和服务器利用率,是资源合理配置的方法。 3.大量的虚拟地址到物理地址的快速准确地查询转换是一个难题。


CPU如果获取内存中的数据

CPU并不直接和物理内存打交道,而是把地址转换的活外包给了MMU,MMU是一种硬件电路,其速度很快,主要工作是进行内存管理,地址转换只是它承接的业务之一。

一起看看MMU是如何搞定地址转换的。


4.1 MMU和Page Table

每个进程都会有自己的页表Page Table,页表存储了进程中虚拟地址到物理地址的映射关系,所以就相当于一张地图,MMU收到CPU的虚拟地址之后开始查询页表,确定是否存在映射以及读写权限是否正常,如图:

对于4GB的虚拟地址且大小为4KB页,一级页表将有2^20个表项,页表占有连续内存并且存储空间大,多级页表可以有效降低页表的存储空间以及内存连续性要求,但是多级页表同时也带来了查询效率问题。

我们以2级页表为例,MMU要先进行两次页表查询确定物理地址,在确认了权限等问题后,MMU再将这个物理地址发送到总线,内存收到之后开始读取对应地址的数据并返回。

MMU在2级页表的情况下进行了2次检索和1次读写,那么当页表变为N级时,就变成了N次检索+1次读写。

可见,页表级数越多查询的步骤越多,对于CPU来说等待时间越长,效率越低,这个问题还需要优化才行。

>> 本段小结 敲黑板 划重点 << 1.页表存在于进程的内存之中,MMU收到虚拟地址之后查询Page Table来获取物理地址。 2.单级页表对连续内存要求高,于是引入了多级页表,但是多级页表也是一把双刃剑,在减少连续存储要求且减少存储空间的同时降低了查询效率。

4.2 MMU和TLB的故事

MMU和TLB的故事就这样开始了...

CPU觉得MMU干活虽然卖力气,但是效率有点低,不太想继续外包给它了,这一下子把MMU急坏了。

MMU于是找来了一些精通统计的朋友,经过一番研究之后发现CPU用的数据经常是一小搓,但是每次MMU都还要重复之前的步骤来检索,害,就知道埋头干活了,也得讲究方式方法呀!

找到瓶颈之后,MMU引入了新武器,江湖人称快表的TLB,别看TLB容量小,但是正式上岗之后干活还真是不含糊。

当CPU给MMU传新虚拟地址之后,MMU先去问TLB那边有没有,如果有就直接拿到物理地址发到总线给内存,齐活。

TLB容量比较小,难免发生Cache Miss,这时候MMU还有保底的老武器页表 Page Table,在页表中找到之后MMU除了把地址发到总线传给内存,还把这条映射关系给到TLB,让它记录一下刷新缓存。

TLB容量不满的时候就直接把新记录存储了,当满了的时候就开启了淘汰大法把旧记录清除掉,来保存新记录,彷佛完美解决了问题。

在TLB和Page Table加持之下,CPU感觉最近MMU比较给力了,就问MMU怎么做到的?MMU就一五一十告诉了CPU。

CPU说是个不错的路子,随后说出了自己的建议:TLB还是有点小,缓存不命中也是经常发生的,要不要搞个大的,这样存储更多访问更快?

MMU一脸苦笑说道大哥TLB很贵的,要不你给涨点外包费?话音未落,CPU就说涨工资是不可能了,这辈子都不可能了。

>>>高能预警 敲黑板 本段小结<<< 1. CPU要根据用户进程提供的虚拟地址来获取真实数据,但是它并不自己做而是交给了MMU。 2. MMU也是个聪明的家伙,集成了TLB来存储CPU最近常用的页表项来加速寻址,TLB找不到再去全量页表寻址,可以认为TLB是MMU的缓存。 3. TLB的容量毕竟有限,为此必须依靠Page Table一起完成TLB Miss情况的查询,并且更新到TLB建立新映射关系。

缺页异常Page Fault大揭秘

设想CPU给MMU的虚拟地址在TLB和Page Table都没有找到对应的物理页帧或者权限不对,该怎么办呢?

没错,这就是缺页异常Page Fault,它是一个由硬件中断触发的可以由软件逻辑纠正的错误。

5.1 PageFault,它来了

假如目标内存页在物理内存中没有对应的页帧或者存在但无对应权限,CPU 就无法获取数据,这种情况下CPU就会报告一个缺页错误。

由于CPU没有数据就无法进行计算,CPU罢工了用户进程也就出现了缺页中断,进程会从用户态切换到内核态,并将缺页中断交给内核的 Page Fault Handler 处理。

缺页异常并不可怕,只要CPU要的虚拟地址经过MMU的一番寻址之后没有找到或者找到后无权限,就会出现缺页异常,因此触发异常后的处理流程将是重点内容。

5.2 缺页错误的分类处理

缺页中断会交给PageFaultHandler处理,其根据缺页中断的不同类型会进行不同的处理:

  • Hard Page Fault
    也被称为Major Page Fault,翻译为硬缺页错误/主要缺页错误,这时物理内存中没有对应的页帧,需要CPU打开磁盘设备读取到物理内存中,再让MMU建立VA和PA的映射。

  • Soft Page Fault
    也被称为Minor Page Fault,翻译为软缺页错误/次要缺页错误,这时物理内存中是存在对应页帧的,只不过可能是其他进程调入的,发出缺页异常的进程不知道而已,此时MMU只需要建立映射即可,无需从磁盘读取写入内存,一般出现在多进程共享内存区域。

  • Invalid Page Fault
    翻译为无效缺页错误,比如进程访问的内存地址越界访问,又比如对空指针解引用内核就会报segment fault错误中断进程直接挂掉。

5.3 缺页错误出现的原因

不同类型的Page Fault出现的原因也不一样,常见的几种原因包括:

  • 非法操作访问越界
    这种情况产生的影响也是最大的,也是Coredump的重要来源,比如空指针解引用或者权限问题等都会出现缺页错误。

  • 使用malloc新申请内存
    malloc机制是延时分配内存,当使用malloc申请内存时并未真实分配物理内存,等到真正开始使用malloc申请的物理内存时发现没有才会启动申请,期间就会出现Page Fault。

  • 访问数据被swap换出
    物理内存是有限资源,当运行很多进程时并不是每个进程都活跃,对此OS会启动内存页面置换将长时间未使用的物理内存页帧放到swap分区来腾空资源给其他进程,当存在于swap分区的页面被访问时就会触发Page Fault从而再置换回物理内存。

>>> 敲黑板 划重点 本段小结:<<< 触发Page Fault的原因可能有很多,归根到底也只有几种大类: 1. 如使用共享内存区域,没有存储VA->PA的映射但是存在物理页帧的软缺页错误,在Page Table/TLB中建立映射关系即可。 2. 访问的地址在物理内存中确实不存在,需要从磁盘/swap分区读入才能使用,这种性能影响会比较大,因为磁盘太慢了,尽量使用高性能的SSD来降低延时。 3. 访问的地址内存非法,缺页错误会升级触发SIGSEGV信号结束进程,这种属于可以导致进程挂掉的一种缺页错误。

全文总结

本文粗浅地和大家一起学习了Page Fault的相关知识点,包括Linux虚拟地址和物理地址的关系、CPU获取内存数据的过程、MMU和TLB&页表的协同配合、缺页异常产生的原因和分类处理。

本文并没有对MMU的内部机制、内核态&用户态缺页异常、缺页异常处理函数等内容进行展开,主要是因为这部分内容相对晦涩,还得靠自己深入研究。

本文旨在把火点燃而不是把桶填满,对于文中相关知识点,欢迎交流沟通学习。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
发现没有只要个子高,皮肤白皙,站在人群里就会比较显眼

发现没有只要个子高,皮肤白皙,站在人群里就会比较显眼

岁月有情1314
2026-05-23 16:33:47
反腐风暴过后,国企现5大反常现象,老问题解决新麻烦接踵而至

反腐风暴过后,国企现5大反常现象,老问题解决新麻烦接踵而至

职场资深秘书
2026-06-04 12:20:01
“摸奶子”再惹争议,OPPO的流量反噬开始了

“摸奶子”再惹争议,OPPO的流量反噬开始了

品牌头版
2026-05-13 10:18:15
950亿身家全部捐献,大润发创始人:绝不留财养后辈

950亿身家全部捐献,大润发创始人:绝不留财养后辈

青眼财经
2026-06-04 12:23:22
随着科斯秋克0-2,法网女单决赛诞生第一席:世界第8刷新最佳战绩

随着科斯秋克0-2,法网女单决赛诞生第一席:世界第8刷新最佳战绩

侧身凌空斩
2026-06-04 22:28:36
研究表明:男性嫖娼率6.4%,女性出轨率15%,且越有钱越开放!

研究表明:男性嫖娼率6.4%,女性出轨率15%,且越有钱越开放!

黯泉
2026-04-01 17:28:39
越南人评价中国:环境很好,科技很发达,不过有一点比不上越南

越南人评价中国:环境很好,科技很发达,不过有一点比不上越南

无意争春
2026-06-03 15:14:11
郑丽文将参选2028?国民党正式表态,台媒体人回应亮了

郑丽文将参选2028?国民党正式表态,台媒体人回应亮了

DS北风
2026-06-04 15:58:04
哈珀的父亲在马刺队总决赛首战失利时公开批评:3名裁判打瞌睡

哈珀的父亲在马刺队总决赛首战失利时公开批评:3名裁判打瞌睡

好火子
2026-06-04 23:18:59
金价,大跌

金价,大跌

极目新闻
2026-06-04 22:23:10
AI脸引发全民生理性厌恶,AI美颜正在慢慢毁掉我们的审美

AI脸引发全民生理性厌恶,AI美颜正在慢慢毁掉我们的审美

西楼知趣杂谈
2026-06-04 12:14:18
男篮热身赛仅四人有望进大名单!徐昕庞峥麟惊喜,王俊杰成基本盘

男篮热身赛仅四人有望进大名单!徐昕庞峥麟惊喜,王俊杰成基本盘

篮球资讯达人
2026-06-04 23:40:20
刘亦菲鼻子哭红了!参加同学聚会抱着老师哭,合影站在角落不抢镜

刘亦菲鼻子哭红了!参加同学聚会抱着老师哭,合影站在角落不抢镜

杨仔述
2026-06-04 14:13:54
广东一男子酒后开摩托去练车,教练发现其喝酒不让练,回家路上被交警查处,焦急询问“我下周考科目二怎么办?”

广东一男子酒后开摩托去练车,教练发现其喝酒不让练,回家路上被交警查处,焦急询问“我下周考科目二怎么办?”

台州交通广播
2026-06-04 22:07:16
官方:曼联3-2击败阿森纳的比赛入围英超赛季最佳比赛候选;DO:曼城对安德森的首份报价遭拒,曼联仍对他感兴趣,但不会出高价

官方:曼联3-2击败阿森纳的比赛入围英超赛季最佳比赛候选;DO:曼城对安德森的首份报价遭拒,曼联仍对他感兴趣,但不会出高价

MUREDS
2026-06-04 23:52:01
就是这个人,让外蒙古独立出去,从中国“蒙古省”成为了蒙古国!

就是这个人,让外蒙古独立出去,从中国“蒙古省”成为了蒙古国!

抽象派大师
2026-06-05 02:08:33
马上扔掉家里这1种调料,不仅有毒还致癌!很多人还天天吃

马上扔掉家里这1种调料,不仅有毒还致癌!很多人还天天吃

39健康网
2026-06-01 08:31:23
小马云样貌大变,和女友高调官宣恋情,晒合照秀恩爱

小马云样貌大变,和女友高调官宣恋情,晒合照秀恩爱

微微热评
2026-05-28 14:37:46
张艺谋4月身体出状况,陈婷摘掉妻子认证

张艺谋4月身体出状况,陈婷摘掉妻子认证

青杉依旧啊啊
2026-05-16 23:41:41
新华视点|协同聚力破壁强链 智造领航提质增效

新华视点|协同聚力破壁强链 智造领航提质增效

新华社
2026-06-04 14:29:58
2026-06-05 04:00:49
CSDN incentive-icons
CSDN
成就一亿技术人
26614文章数 242292关注度
往期回顾 全部

科技要闻

历史最大IPO!马斯克下周冲击万亿富豪

头条要闻

美财长:我说过要“揍他一顿”

头条要闻

美财长:我说过要“揍他一顿”

体育要闻

欧冠决赛躺赢?他也曾是大巴黎的英雄

娱乐要闻

难怪奚梦瑶能嫁入豪门

财经要闻

AI公司的顶部在哪?

汽车要闻

北京现代5月销量强势反弹:国内17065辆 出口环比翻倍

态度原创

游戏
健康
房产
手机
公开课

索尼PS第一方新作官宣延期!2027年发售 女角色很美

5月干细胞新规解决了哪些难题?

房产要闻

震撼!海口顶豪“素颜出境”,直接顶穿品质天花板!

手机要闻

iPhone18 Pro Max:八大亮点全解析,还有额外的惊喜!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版