Linux I/O缓冲
1:两类I/O函数的缓冲机制
1.1 系统调用(System call)
这类代表就是read/write等系统函数,它们是不带缓冲的,这里的缓冲指的是进程缓冲,在内核到磁盘之间还是有内核缓冲的。

1.2 标准I/O
这类代表就是fread/fwrite等函数,它们带有进程缓冲,可移植性强,最后还是通过read/write函数实现的。

2:两种缓冲的作用
首先要了解一下写一条内容到文件中的过程,以标准I/O的fwrite为例,首先将buffer拷贝到进程缓冲区,fwrite函数即刻就返回,标准I/O检查进程缓冲区是否填满,如是,将进程缓冲区内容拷贝至内核缓冲区,内核查看内核缓冲区是否填满,如是,将内核缓冲区内容通过磁盘I/O写入到磁盘块中。
缓冲的主要作用是提高I/O的效率,缓冲分为两种,一种是标准I/O有的进程缓冲,一种就是大家都有的内核缓冲。
进程缓冲(注:系统调用没有此机制):此缓冲是为了防止频繁调用系统调用而设置的,提高了系统调用的效率,因为将数据从用户空间拷贝到内核缓冲区需要进行角色切换,这个过程比较耗时。
内核缓冲:此缓冲是为了防止频繁调用磁盘I/O而设置的,如果没有内核缓冲区,系统调用直接将内容写到磁盘块中会频繁调用磁盘I/O,磁盘I/O的效率是很低的(硬件磁盘多样,且相比于CPU的写入动作来讲超级慢,所以CPU必定会花很多时间等待磁盘的数据录入,造成效率低下),有了内核缓冲区就可以先将数据暂存在这里,达到阈值之后一次性写入到磁盘块中。
那么什么时机会将缓冲的数据进行冲洗呢?
3:冲洗缓冲区
3.1 无缓冲
read/write就是属于无缓冲的,常见的例子就是向stderr输出,会立即输出到终端设备。
3.2 行缓冲
所谓行缓冲就是遇见换行符就会刷新缓冲区将数据输出,如标准输入和标准输出就是遇见换行符就会将数据输入或写入内核。
标准输出:printf("xxxx\n"),默认输出是遇见"\n"就向终端打印,如果是printf("xxxx"),xxxx是留在缓冲区的,直到缓冲区填满或进程退出(退出会调用fflush)才输出到终端。
标准输入:scanf("%d",&d),标准输入在键入换行符之前数据都暂存在内核缓冲区中,直到键入换行符才将内核缓冲区的数据写入到磁盘块中。
3.3 全缓冲
一般的写入磁盘文件都属于全缓冲,一定要等到缓冲区填满才将数据写到文件中。
Linux I/O缓冲的更多相关文章
- Linux禁用显示“缓冲调整”
Linux禁用显示"缓冲调整" youhaidong@youhaidong-ThinkPad-Edge-E545:~$ free -o total used free shared ...
- linux标准IO缓冲(apue)
为什么需要标准IO缓冲? LINUX用缓冲的地方遍地可见,不管是硬件.内核还是应用程序,内核里有页高速缓冲,内存高速缓冲,硬件更不用说的L1,L2 cache,应用程序更是多的数不清,基本写的好的软件 ...
- Linux IO Scheduler(Linux IO 调度器)
每个块设备或者块设备的分区,都对应有自身的请求队列(request_queue),而每个请求队列都可以选择一个I/O调度器来协调所递交的request.I/O调度器的基本目的是将请求按照它们对应在块设 ...
- linux IO调度
I/O 调度算法再各个进程竞争磁盘I/O的时候担当了裁判的角色.他要求请求的次序和时机做最优化的处理,以求得尽可能最好的整体I/O性能.在linux下面列出4种调度算法CFQ (Completely ...
- Linux文件系统性能优化 (转)
http://blog.chinaunix.net/uid-7530389-id-2050116.html 由于各种的I/O负载情形各异,Linux系统中文件系统的缺省配置一般来说都比较中庸,强调普遍 ...
- linux下proc里关于磁盘性能的参数
我 们在磁盘写操作持续繁忙的服务器上曾经碰到一个特殊的性能问题.每隔 30 秒,服务器就会遇到磁盘写活动高峰,导致请求处理延迟非常大(超过3秒).后来上网查了一下资料,通过调整内核参数,将写活动的高峰 ...
- linux setsockopt
linux setsockopt Socket描述符选项[SOL_SOCKET] #include <sys/socket.h> int setsockopt( int socket, ...
- Linux IO 调度器
Linux IO Scheduler(Linux IO 调度器) 每个块设备或者块设备的分区,都对应有自身的请求队列(request_queue),而每个请求队列都可以选择一个I/O调度器来协调所递交 ...
- 在linux系统中I/O 调度的选择
I/O 调度算法再各个进程竞争磁盘I/O的时候担当了裁判的角色.他要求请求的次序和时机做最优化的处理,以求得尽可能最好的整体I/O性能. 在linux下面列出4种调度算法 CFQ (Compl ...
随机推荐
- openstack-r版(rocky)搭建基于centos7.4 的openstack swift对象存储服务 三
openstack-r版(rocky)搭建基于centos7.4 的openstack swift对象存储服务 一 openstack-r版(rocky)搭建基于centos7.4 的openstac ...
- [题解] 洛谷 P3603 雪辉
模拟赛中遇到了这个题,当时我这个沙雕因为把一个\(y\)打成了\(x\)而爆零.回来重新写这道题,莫名其妙的拿了rank1... 我的解法与其他几位的题解有些不同我太蒻了.并没有选取所谓的关键点,而是 ...
- scikit-learn 0.18中的cross_validation模块被移除
环境:scikit-learn 0.18 , python3 from sklearn.cross_validation import train_test_split from sklearn.gr ...
- C语言—单链表
单链表操作:读取,插入和删除 #include "stdafx.h" #include <string.h> #include <stdio.h> #inc ...
- 亚马逊:PS4和Xbox One实在太火
圣诞节刚刚结束,当实体零售商在抱怨坑爹的天气让自己节日生意变得冷清的同时,在线零售商们却依旧赚的盆满钵满. 亚马逊近日表示,今年节日期间的零售工作非常不错,新一代游戏机更是最大的亮点.据销售统计,在圣 ...
- 0421--"数字口袋精灵app"二次开发(Blackbriar团队开发)
"数字口袋精灵app"二次开发 目录: 一.项目github总仓库推送 二.开发成员 三.分工与合作 四.各模块成果 五.心得墙 六.团队成员贡献分 内容: 一.项目github总 ...
- Java Web文件上传原理分析(不借助开源fileupload上传jar包)
Java Web文件上传原理分析(不借助开源fileupload上传jar包) 博客分类: Java Web 最近在面试IBM时,面试官突然问到:如果让你自己实现一个文件上传,你的代码要如何写,不 ...
- lintcode-419-罗马数字转整数
419-罗马数字转整数 给定一个罗马数字,将其转换成整数. 返回的结果要求在1到3999的范围内. 说明 什么是 罗马数字? https://en.wikipedia.org/wiki/Roman_n ...
- jQuery之数组处理函数
摘要:$.each,$.grep,$.map,$.merge,$.inArray,$.unique,$.makeArray 1. $.each(array, [callback]) 遍历[常用] 解释 ...
- Cmder命令行工具在Windows系统中的配置
一.Cmder简介 Cmder:一款用于Windows系统中,可增强传统cmd命令行工具的控制台模拟器(类似于Linux系统中的终端控制窗口) 特点: 无需安装,解压即用 可使用较多Linux命令,如 ...