[访谈记录] 操作系统 VIII
本文已参与「新人创作礼」活动,一起开启掘金创作之路。
页面置换算法
页面的换入、换出需要磁盘I/O,因为涉及外存到内存互调,会有较大的开销,因此,优秀的页面置换算法应该是追求:更少的缺页率
最佳置换算法(OPT)
每次选择:以后永不使用,或者在最长时间内不再被访问的页面,进行淘汰,这样可以保证最低的缺页率。
由于需要预知未来,所以最佳置换算法是无法实现的。
整个过程:缺页中断发生了9次,页面置换发生了6次,缺页时未必发生页面置换,若有空闲内存块,就不用进行页面置换。
先进先出置换算法(FIFO)
每次选择:最早进入内存的页面进行淘汰(或者说在内存中待的时间最长的页面进行淘汰)
Belady异常(为进程分配的物理块数增大时,缺页次数不减反增的异常现象)
只有FIFO算法会产生Belady异常!!! 并且FIFO性能并不好
最近最久未使用置换算法(LRU:Least Recently Used)
每次淘汰:最近最久未被使用的页面(参考过去的经验)
实现方法:给每个页面对应的页表项中,用访问字段记录该页面自上次被访问后所经历的时间t,当需要淘汰页面时,选择页面中t值最大的进行淘汰。
算法性能好(最接近OPT),但算法的实现需要专门的硬件支持,实现困难,开销大
时钟置换算法(Clock)(或:最近未用算法:NRU,Not Recently Used)
此算法是一种性能与开销都较均衡的算法,算法开销较小,性能也不错。
简单的时钟置换算法,实现方法:为每个页面设置一个访问位,将内存中的页面都链接成循环队列。 当某个页面被访问时,其访问位置为1。
当需要淘汰页面时,只需要检查页面的访问位,如果是0就选择该页换出;如果是1,则将它置0,暂不换出,继续检查下一个页面,若第一轮扫描所有的页面都是1,则将所有页面的访问位都置0(在扫描过程中已经置0了),并开始第二轮扫描(这样第二轮扫描中一定会有访问位=0的页面。
简单的时钟置换算法选择一个页面进行淘汰时,最多会经过两轮扫描!!
由于扫描的过程类似于时钟,所以叫做时钟置换算法。
LRU和CLOCK算法的区别:
LRU:选择最近最久未被使用的页面进行淘汰,淘汰标准是:时间
CLOCK:选择最近最少使用的页面进行淘汰,淘汰标准是:使用频率
改进型的时钟置换算法
在简单算法的基础上,还要考虑页面是否修改过,在其他条件都相同时,优先淘汰没有修改过的页面,避免I/O操作。
用(访问位,修改位)的形式表示各个页面状态:如(1,1)表示一个页面近期被访问过且被修改过。
注意,只有第二轮需要将扫描过的访问位置0,其它几轮扫描不需要修改标志位。
先考虑最近未使用且未被修改(第一优先级)的,没找到就考虑最近未使用但被修改的(第二优先级),如果还没找到,就把所有访问位置0,再重新扫描找最近未使用且未被修改的(第三优先级),没找到就考虑最近未使用且被修改的(第四优先级)。
页面分配、置换策略
驻留集:请求分页存储管理中给进程分配的物理块的集合。(驻留集一般小于进程的总大小,肯定不可能整个内存都分配给该进程)
就是系统给进程分配的物理块个数
驻留集太小,会导致缺页频繁,系统要花费大量时间来处理缺页。
驻留集太大,会导致多道程序并发度下降,资源利用率降低。
固定分配: os为每个进程分配一组固定数目的物理块,在进程运行期间不再改变。(即:驻留集大小不变)
可变分配: 先为每个进程分配一定数目的物理块,在进程运行期间,可根据情况做适当的增加或减少。(即:驻留集大小可变)
局部置换: 发生缺页时,只能选进程自己的物理块进行置换。
全局置换: 可以将操作系统保留的空闲物理块分配给缺页进程,也可以将别的进程持有的物理块置换到外存(就是把该物理块中的页面置换到外存,这个物理块就空了,可以分配给缺页的进程),再分配给缺页进程。
分配和置换策略两两组合,构成三种策略(固定分配 + 全局置换,不能实现,因为全局置换中进程的物理块数肯定会改变,而固定分配又要求每个进程的物理块数固定)
1、固定分配 + 局部置换:系统为每个进程分配一定数量的物理块,在整个运行期间都不改变。若进程在运行中发生缺页,只能从该进程在内存中的页面中选出一页进行置换。
缺点:很难在刚开始就确定为每个进程分配多少个物理块才算合理。
2、可变分配 + 全局置换:os刚开始为每个进程分配一定数量的物理块。os会保持一个空闲物理块队列,当某进程发生缺页时,从空闲物理块中取出一块分配给该进程。若无空闲的物理块,则选择一个未锁定的页面换出外存,再将该物理块分配给缺页的进程。
采用这种策略时,只要某进程发生缺页,都将获得新的物理块,仅当空闲物理块用完时,系统才选择一个未锁定的页面调出。(被选择调出的页可能是系统中任何一个进程中的页)
3、可变分配 + 局部置换:给进程分配的物理块有可能变化,发生缺页时,只能选择进程自己的物理块进行置换。频繁缺页的进程,多分配一些物理块;缺页率很低的进程,回收一些物理块,直至缺页率合适。
上一篇: CSAPP 虚拟内存注释
推荐阅读
-
记录在U盘安装Centos 7.1操作系统的常见问题
-
[访谈记录] 操作系统 VIII
-
Nginx (VIII) 记录并获取客户端的真实 IP 地址
-
就装配式建筑与一线工作人员的访谈记录
-
InfoQ,谈谈百度开源高性能搜索引擎 Puck-Ben:Puck是团队长期研究和努力的成果,作为Puck的负责人,我对这个项目有着深深的热爱和执着,对我个人而言,它不仅仅是一个搜索引擎,而是代表着团队心血和智慧的结晶,它是我们对技术的追求,对创新的执着,也是我们对未来的期望和愿景,Puck的每一次升级和优化都记录着我们的成长和进步。这是我们对技术的追求,对创新的执着,也是我们对未来的期望和憧憬,帕克的每一次升级和优化都记录着我们的成长和进步。 我对帕克的未来充满期待。首先,我希望 Puck 能够在开发者社区得到广泛应用,同时得到社区的反馈,不断优化和改进。我期待看到更多的人参与到Puck的开发和使用中来,通过大家的共同努力,让Puck成为人工智能领域有影响力的工具。其次,我希望Puck能够不断创新和优化,保持技术领先地位,不仅要适应当前的技术需求,更要预测和引领未来的技术趋势。最后,我希望Puck能在更多的实际应用中实现自身价值,为人工智能在各行各业的应用提供有力支撑,推动科技发展。 访谈嘉宾简介: Ben,百度搜索内容技术部主任架构师,负责多模态内容理解、超大规模内容关系计算、内容处理与生成、模型优化等方向。 欢迎加入朋克技术交流群:913964818 本部门招聘ANN搜索工程师、模型优化工程师、分布式计算研发工程师等多个职位。欢迎勇于接受挑战、具有优秀分析和解决问题能力的人才加入我们。 招聘邮箱:tianyakun@baidu.com --END-- 推荐阅读
-
一个小型工厂的 JAVA 后端初始访谈、记录
-
Grid++Report 锐浪报表开发常见问题解答集锦-报表设计 问:怎样在设计时打印预览报表? 答:为了及时查看报表的设计效果,Grid++Report 报表设计应用程序提供了四种查看视图:普通视图、页面视图、预览视图与查询视图。通过窗口下边的 Tab 按钮可以在四种视图中任意切换。在预览视图中查看报表的打印预览效果,在查询视图中查看报表的查询显示效果。如果在报表的记录集提供了数据源连接串与查询 SQL,在进入预览视图与查询视图时会利用数据源连接串与查询 SQL 从数据源中自动取数,否则 Grid++Report 将自动生成模拟数据进行模拟打印预览与查询显示。注意:在预览视图与查询视图中看到的报表运行结果有可能与在你程序中的最终运行结果有差异,因为在报表的生成过程中我们可以在程序中对报表的生成行为进行一定的控制。 问:怎样用 Grid++Report 设计交叉表? 答:Grid++Report 没有提供专门实现交叉表的功能,其它的报表构件提供的交叉表功能一般也比较死板和功能有限。利用 Grid++Report 的编程接口可以做出灵活多变,功能丰富的交叉表。示例程序 CrossTab 就是一个实现交叉表的例子程序,认真领会此例子程序,你就可以做出自己想要各种交叉表,并能提取一些共用代码,便于重复使用。 问:怎样设置整个报表的缺省字体? 答:设置报表主对象的字体属性,也就是设置了整个报表的缺省字体。如果改变报表主对象的字体属性,则没有专门的设置字体属性的子对象的字体属性也跟随改变。同样每个报表节与明细网格也有字体属性,他们的字体属性也就是其拥有的子对象的缺省字体。 问:怎样在打印时限制一页的输出行数? 答:设定明细网格的内容行的‘每页行数(RowsPerPage)’属性即可。另外要注意‘调节行高(AdjustRowHeight)’属性值:为真时根据页面的输出高度自动调整行的高度,使整个页面的输出区域充满。为假时按设计时的高度输出行。 问:怎样显示中文大写金额? 答:将对象的“格式(Format)”属性设为 “$$” 及可,可以设置格式的对象有:字段(IGRField)、参数(IGRParameter)、系统变量(IGRSystemVarBox)与综合文字框(IGRMemoBox),其中综合文字框是在报表式上设格式。 问:能否实现自定义纸张与票据打印? 答:Grid++Report 完全支持自定义纸张的打印,只要在报表设定时在页面设置中选定自定义纸张,并指定准确的纸张尺寸。当然要在最终输出时得道合适的打印结果,输出打印机必须支持自定义纸张打印。Windows2000/XP/2003 操作系统上可以在打印机上定义自定义纸张,也可以采用这种方式实现自定义纸张打印。 问:怎样实现 0 值不打印? 答:直接设置格式串就可以,在“数字格式”设置对话框中选定“0 不显示”,就会得到合适的格式串。也可以通过直接录入格式串来指定 0 不显示,但格式串必须符合 Grid++Report 的规定格式。另一种实现办法是在报表获取明细记录数据时,在 BeforePostRecord 事件中将值为零的字段设为空,调用字段的 Clear 方法将字段置为空。 问:怎样实现多栏报表? 答:在明细网格上设‘页栏数(PageColumnCount)’属性值大于 1 即可。通过 Grid++Report 的“页栏输出顺序”还可以指定多栏报表的输出顺序是“先从上到下”还是“先从左到右”。 问:如何实现票据套打? 答:Grid++Report 为实现票据套打做了很多专门的安排:报表设计器提供了页面设计模式,按照设定的纸张尺寸显示设计面板,如果将空白票据的扫描图设为设计背景图,在定位报表内容的输出位置会非常方便。报表部件可以设定打印类别,非套打输出的内容在套打打印模式下就不会输出。 问:Grid++Report 有没有横向分页功能? 答:回答是肯定的,在列的总宽度超过打印页面的输出宽度时,Grid++Report 可以另起新页输出剩余的列,如果左边存在锁定列,锁定列可以在后面的新页中重复输出,这样可以保证关键数据列在每一页都有输出。仔细体会 Grid++Report 提供的多种打印适应策略,选用最合适的方式。Grid++Report 的多种打印适应策略为开发动态报表提供了很好的支持。 问:怎样实现报表本页小计功能? 答:定义一个报表分组,将本分组定义为页分组,在本分组的分组头与分组尾上定义统计。页分组就是在每页产生一个分组项,在每页的上端与下端都会分别显示页分组的分组头与分组尾,页分组不用定义分组依据字段。 报表运行 问:怎样与数据库建立连接? 答:如果在设计报表时指定了数据集的数据源连接串与查询 SQL 语句,Grid++Report 采用拉模式直接从数据源取得报表数据,Grid++Report 利用 OLE DB 从数据源取数,OLE DB 提供了广泛的数据源操作能力。如果 Grid++Report 的数据来源采用推模式,即 Grid++Report 不直接与数据库建立连接,各种编程语言/平台都提供了很好的数据库连接方式,并且易于操作,应用程序在报表主对象(IGridppReport)的 FetchRecord 事件中将数据传入,例子程序提供了各种编程语言填入数据的通用方法,对C++Builder 和 Delphi 还进行了专门的包装,直接关联 TDataSet 对象也可以将 TDataSet 对象中的数据传给报表。 问:打印时能否对打印纸张进行自适应?支持表格的折行打印吗? 答:Grid++Report 在打印时采用多种适应策略,通过设置明细网格(IGRDetailGrid)的‘打印策略(PrintAdaptMethod)’属性指定打印策略。(1)丢弃:按设计时列的宽度输出,超出范围的内容不显示。(2)绕行:按设计时列的宽度输出,如果在当前行不能完整输出,则另起新行进行输出。(3)缩放适应:对所有列的输出宽度进行按比例地缩放,使总宽度等于页面的输出宽度。(4)缩小适应:如果列的总宽度小于页面的输出宽度,对所有列的输出宽度进行按比例地缩小,使总宽度等于页面的输出宽度。(5)横向分页:超范围的列在新页中输出。(6)横向分页并重复锁定列。 问:如何改变缺省打印预览窗口的窗口标题? 答:改变报表主对象的‘标题(Title)’属性即可。 问:利用集合对象的编程接口取子对象的接口引用,但不是自己期望的结果。 答:Grid++Report中所有集合对象的下标索引都是从 1 开始,另按对象的名称查找对象的接口引用时,名称字符是不区分大小写的。 问:怎样在运行时控制报表中各个对象的可见性?即怎样在运行时显示或隐藏对象? 答:在报表主对象(GridppReport)的 SectionFormat 事件中设定相应报表子对象的可见(Visible)属性即可。 问:报表主对象重新载入数据,设计器中为什么没有反映新载入的数据? 答:应调用 IGRDesigner 的 Reload 方法。 问:怎样实现不进入打印预览界面,直接将报表打印出来?