linux i/o 系统简介
linux i/o调度器(linux i/o scheduler)是linuxi/o体系的一个组件,它介于通用块层和块设备驱动程序之间。如图 1 所示。
图1 linux i/o调度器介于通用块层和块设备驱动程序之间
当linux内核组件要读写一些数据时,并不是请求一发出,内核便立即执行该请求,而是将其推迟执行。当传输一个新数据块时,内核需要检查它能否通过。linux io调度程序是介于通用块层和块设备驱动程序之间,所以它接收来自通用块层的请求,试图合并请求,并找到最合适的请求下发到块设备驱动程序中。之后块设备驱动程序会调用一个函数来响应这个请求。
linux整体i/o体系可以分为七层,它们分别是:
1. vfs虚拟文件系统:内核要跟多种文件系统打交道,内核抽象了这vfs,专门用来适配各种文件系统,并对外提供统一操作接口。
2. 磁盘缓存:磁盘缓存是一种将磁盘上的一些数据保留着ram中的软件机制,这使得对这部分数据的访问可以得到更快的响应。磁盘缓存在linux中有三种类型:dentry cache ,page cache , buffer cache。
3. 映射层:内核从块设备上读取数据,这样内核就必须确定数据在物理设备上的位置,这由映射层(mapping layer)来完成。
4. 通用块层:由于绝大多数情况的i/o操作是跟块设备打交道,所以linux在此提供了一个类似vfs层的块设备操作抽象层。下层对接各种不同属性的块设备,对上提供统一的block io请求标准。
5. i/o调度层:大多数的块设备都是磁盘设备,所以有必要根据这类设备的特点以及应用特点来设置一些不同的调度器。
6. 块设备驱动:块设备驱动对外提供高级的设备操作接口。
7. 物理硬盘:这层就是具体的物理设备。
5种类型的linux i/o调度器
linux 从2.4内核开始支持i/o调度器,到目前为止有5种类型:linux 2.4内核的 linus elevator、linux 2.6内核的 deadline、 anticipatory、 cfq、 noop,其中anticipatory从linux 2.6.33版本后被删除了。目前主流的linux发行版本使用deadline、 cfq、 noop三种i/o调度器。下面依次简单介绍:
1 linus elevator
在2.4 内核中它是第一种i/o调度器。它的主要作用是为每个设备维护一个查询请求,当内核收到一个新请求时,如果能合并就合并。如果不能合并,就会尝试排序。如果既不能合并,也没有合适的位置插入,就放到请求队列的最后。
2 anticipatory
anticipatory的中文含义是预料的,预想的,顾名思义有个i/o发生的时候,如果又有进程请求i/o操作,则将产生一个默认的6毫秒猜测时间,猜测下一个进程请求i/o是要干什么的。这个i/o调度器对读操作优化服务时间,在提供一个i/o的时候进行短时间等待,使进程能够提交到另外的i/o。anticipatory算法从linux 2.6.33版本后被删除了,因为使用cfq通过配置也能达到anticipatory的效果。
3 deadline
deadline翻译成中文是截止时间调度器,是对linus elevator的一种改进,它避免有些请求太长时间不能被处理。另外可以区分对待读操作和写操作。deadline额外分别为读i/o和写i/o提供了fifo队列。deadline的工作流程如图 2 所示。
图2 deadline的工作流程
4 cfq
cfq全称completely fair scheduler ,中文名称完全公平调度器,它是现在许多 linux 发行版的默认调度器,cfq是内核默认选择的i/o调度器。它将由进程提交的同步请求放到多个进程队列中,然后为每个队列分配时间片以访问磁盘。对于通用的服务器是最好的选择,cfq均匀地分布对i/o带宽的访问。cfq为每个进程和线程,单独创建一个队列来管理该进程所产生的请求,以此来保证每个进程都能被很好的分配到i/o带宽,i/o调度器每次执行一个进程的4次请求。该算法的特点是按照i/o请求的地址进行排序,而不是按照先来后到的顺序来进行响应。简单来说就是给所有同步进程分配时间片,然后才排队访问磁盘,cfq的工作流程如图 3 所示 。
图3 cfq的工作流程
5 noop
noop全称no operation,中文名称电梯式调度器,该算法实现了最简单的fifo队列,所有i/o请求大致按照先来后到的顺序进行操作。noop实现了一个简单的fifo队列,它像电梯的工作主法一样对i/o请求进行组织。它是基于先入先出(fifo)队列概念的 linux 内核里最简单的i/o 调度器。此调度程序最适合于固态硬盘。noop的工作流程如图4 所示。
图4 noop的工作流程
i/o调度器的选择
目前主流linux发行版本使用三种i/o调度器:deadline、cfq、noop,通常来说deadline适用于大多数环境,特别是写入较多的文件服务器,从原理上看,deadline是一种以提高机械硬盘吞吐量为思考出发点的调度算法,尽量保证在有i/o请求达到最终期限的时候进行调度,非常适合业务比较单一并且i/o压力比较重的业务,比如web服务器,数据库应用等。cfq 为所有进程分配等量的带宽,适用于有大量进程的多用户系统,cfq是一种比较通用的调度算法,它是一种以进程为出发点考虑的调度算法,保证大家尽量公平,为所有进程分配等量的带宽,适合于桌面多任务及多媒体应用。noop 对于闪存设备和嵌入式系统是最好的选择。对于固态硬盘来说使用noop是最好的,deadline次之,而cfq效率最低。
基于DSP的嵌入式视频监测
1394接口是什么样子
为什么笼型电机转子采用斜槽
OPPOR11拍照效果怎么样?OPPOR11拍照赏析,这才是真正的暗夜之星,画质好噪点少
华为的Mate10造势十足,力压iphoneX,抢占一波潜在市场!
Linux IO系统简介和调度器的工作流程详细概述
华为5G设备全球分布图曝光,华为密切关注欧盟未来的5G框架
使用扬尘在线监测系统,实现空气质量24小时连续监测
DSP+FPGA嵌入式多路视频监控系统硬件平台
大数据正在推动更大的容量
采用NI PXI平台和LabVIEW实现谐波干扰的数据采集系统的设计
超级动力电池使用的导热结构胶
AI+边缘计算,让城市治理难题“看得见”又“管得了”
PerferredNetworks发布了其超参数优化框架的beta版本
按需数字制造供应商Protolabs的3D打印部门收入已恢复增长
oppor11什么时候上市?oppor11最新消息:迪丽热巴上跑男不断爆红,oppor11代言终于轮到她
iPhone7疯狂跳水,华为mate9首当其冲!
贵州省IDC行业发展现状分析,全省规模以上数据中心达17个
SmartCAR2.0内超声波传感器构成及工作方式
分析师称苹果新款iPhone将采用触摸感应外壳