Linux I/O缓冲
1:两类I/O函数的缓冲机制
1.1 系统调用(System call)
这类代表就是read/write等系统函数,它们是不带缓冲的,这里的缓冲指的是进程缓冲,在内核到磁盘之间还是有内核缓冲的。

1.2 标准I/O
这类代表就是fread/fwrite等函数,它们带有进程缓冲,可移植性强,最后还是通过read/write函数实现的。

2:两种缓冲的作用
首先要了解一下写一条内容到文件中的过程,以标准I/O的fwrite为例,首先将buffer拷贝到进程缓冲区,fwrite函数即刻就返回,标准I/O检查进程缓冲区是否填满,如是,将进程缓冲区内容拷贝至内核缓冲区,内核查看内核缓冲区是否填满,如是,将内核缓冲区内容通过磁盘I/O写入到磁盘块中。
缓冲的主要作用是提高I/O的效率,缓冲分为两种,一种是标准I/O有的进程缓冲,一种就是大家都有的内核缓冲。
进程缓冲(注:系统调用没有此机制):此缓冲是为了防止频繁调用系统调用而设置的,提高了系统调用的效率,因为将数据从用户空间拷贝到内核缓冲区需要进行角色切换,这个过程比较耗时。
内核缓冲:此缓冲是为了防止频繁调用磁盘I/O而设置的,如果没有内核缓冲区,系统调用直接将内容写到磁盘块中会频繁调用磁盘I/O,磁盘I/O的效率是很低的(硬件磁盘多样,且相比于CPU的写入动作来讲超级慢,所以CPU必定会花很多时间等待磁盘的数据录入,造成效率低下),有了内核缓冲区就可以先将数据暂存在这里,达到阈值之后一次性写入到磁盘块中。
那么什么时机会将缓冲的数据进行冲洗呢?
3:冲洗缓冲区
3.1 无缓冲
read/write就是属于无缓冲的,常见的例子就是向stderr输出,会立即输出到终端设备。
3.2 行缓冲
所谓行缓冲就是遇见换行符就会刷新缓冲区将数据输出,如标准输入和标准输出就是遇见换行符就会将数据输入或写入内核。
标准输出:printf("xxxx\n"),默认输出是遇见"\n"就向终端打印,如果是printf("xxxx"),xxxx是留在缓冲区的,直到缓冲区填满或进程退出(退出会调用fflush)才输出到终端。
标准输入:scanf("%d",&d),标准输入在键入换行符之前数据都暂存在内核缓冲区中,直到键入换行符才将内核缓冲区的数据写入到磁盘块中。
3.3 全缓冲
一般的写入磁盘文件都属于全缓冲,一定要等到缓冲区填满才将数据写到文件中。
Linux I/O缓冲的更多相关文章
- Linux禁用显示“缓冲调整”
Linux禁用显示"缓冲调整" youhaidong@youhaidong-ThinkPad-Edge-E545:~$ free -o total used free shared ...
- linux标准IO缓冲(apue)
为什么需要标准IO缓冲? LINUX用缓冲的地方遍地可见,不管是硬件.内核还是应用程序,内核里有页高速缓冲,内存高速缓冲,硬件更不用说的L1,L2 cache,应用程序更是多的数不清,基本写的好的软件 ...
- Linux IO Scheduler(Linux IO 调度器)
每个块设备或者块设备的分区,都对应有自身的请求队列(request_queue),而每个请求队列都可以选择一个I/O调度器来协调所递交的request.I/O调度器的基本目的是将请求按照它们对应在块设 ...
- linux IO调度
I/O 调度算法再各个进程竞争磁盘I/O的时候担当了裁判的角色.他要求请求的次序和时机做最优化的处理,以求得尽可能最好的整体I/O性能.在linux下面列出4种调度算法CFQ (Completely ...
- Linux文件系统性能优化 (转)
http://blog.chinaunix.net/uid-7530389-id-2050116.html 由于各种的I/O负载情形各异,Linux系统中文件系统的缺省配置一般来说都比较中庸,强调普遍 ...
- linux下proc里关于磁盘性能的参数
我 们在磁盘写操作持续繁忙的服务器上曾经碰到一个特殊的性能问题.每隔 30 秒,服务器就会遇到磁盘写活动高峰,导致请求处理延迟非常大(超过3秒).后来上网查了一下资料,通过调整内核参数,将写活动的高峰 ...
- linux setsockopt
linux setsockopt Socket描述符选项[SOL_SOCKET] #include <sys/socket.h> int setsockopt( int socket, ...
- Linux IO 调度器
Linux IO Scheduler(Linux IO 调度器) 每个块设备或者块设备的分区,都对应有自身的请求队列(request_queue),而每个请求队列都可以选择一个I/O调度器来协调所递交 ...
- 在linux系统中I/O 调度的选择
I/O 调度算法再各个进程竞争磁盘I/O的时候担当了裁判的角色.他要求请求的次序和时机做最优化的处理,以求得尽可能最好的整体I/O性能. 在linux下面列出4种调度算法 CFQ (Compl ...
随机推荐
- 高可用Kubernetes集群-2. ca证书与秘钥
四.CA证书与秘钥 kubernetes集群安全访问有两种方式:"基于CA签名的双向数字证书认证"与"基于BASE或TOKEN的简单认证",生产环境推荐使用&q ...
- Redis 总结精讲 看一篇成高手系统4
本文围绕以下几点进行阐述 1.为什么使用redis2.使用redis有什么缺点3.单线程的redis为什么这么快4.redis的数据类型,以及每种数据类型的使用场景5.redis的过期策略以及内存淘汰 ...
- [ Continuously Update ] This is an *Index Page*.
The links below present papers in certain fields. Despite overlaps exist, their emphasis is markedly ...
- windows下对python的pip更新到最新版本
1->打开windows的命令窗口. 2->进入到pip.exe所在的文件夹下,我安装的python在G:\python3.6文件夹下,pip.exe则在G:\python3.6\Scri ...
- python序列成员资格
可以用做登录操作,判断用户名密码是否正确! 代码示例: database = [ ['], ['], ['], ['] ] username = input("UserName: " ...
- Python3 迭代器和生成器
想要搞明白什么是迭代器,首先要了解几个名词:容器(container).迭代(iteration).可迭代对象(iterable).迭代器(iterator).生成器(generator). 看图是不 ...
- C++ STL 全排列
摘自爱国师哥博客https://www.cnblogs.com/aiguona/p/7304945.html 一.概念 从n个不同元素中任取m(m≤n)个元素,按照一定的顺序排列起来,叫做从n个不同元 ...
- 王者荣耀交流协会final发布版本控制报告
二次开发软件说明文档 Dec 6 纠正饼状图点击选择PSP文件无效. 添加饼状图丢失的代码. submit the files that last night I forgot. add shurum ...
- 03慕课网《vue.js2.5入门》——Vue-cli的安装,创建webpack模板项目
安装Vue-cli 第一种 貌似不可以,然后用了第二种,但是重装系统后,第二种不能用了,用了第一种可以 # 全局安装vue -cli命令npm install --global vue-cli # 创 ...
- vmvare fusion 8
http://jingyan.baidu.com/article/54b6b9c0f8830f2d583b47ce.html 补充:vmware tools 在上面,直接点击安装