系统级I/O学习记录
重要知识点
输入/输出(I/O)
I/O是主存和外部设备(如磁盘驱动器、终端和网络)之间拷贝数据的过程。
- 输入操作是从I/O设备拷贝数据到主存。
- 输出操作是从主存拷贝到I/O设备。
Unix I/O
在unix中所有的I/O设备都被模型化为文件,这使得所有的输入输出都能以一种统一的方式进行。
- 打开文件:一个应用程序通过要求内核打开相应的文件,来宣告它想要访问一个I/O设备。内核返回一个小的非负整数,叫做描述符,它在后续对此文件的所有操作中标识这个文件。
Unix外壳创建的每个进程开始时都有三个打开的文件:标准输入(描述符为0)、标准输出(描述符为1)和标准错误(描述符为2)。头文件<unistd.h>定义常量STDIN_FILENO、STDOUT_FILENO和STDERR_FILENO,可用来代替显式的描述符值。
- 改变当前文件位置:对于每一个打开的文件,内核保持着一个文件位置k,初始时为0。这个文件位置是从文件开头起始的字节偏移量。应用程序能够通过执行seek操作,显示地显示当前文件位置。
- 读写文件:一个读操作就是从文件拷贝n>0个字节到存储器,从当前文件位置k开始,然后将增加到k+n。给定一个大小为m字节的文件,当k>=m时执行读操作会触发一个称为end-of-file(EOF)的·条件,应用程序会检测到这个符号。注:在文件结尾处并没有明确的"EOF符号"。
- 关闭文件:当应用完成对文件的访问后,它会通知内核关闭这个文件。内核释放文件打开时创建的数据结构,并将这个描述符恢复到可用的描述符池。无论一个进程因为何种原因终止时,内核都会关闭所有打开的文件并释放了它们的存储器资源。
打开和关闭文件
进程通过调用open函数来打开一个存在的文件或者创建一个新文件。
- filename为文件描述符,并且返回描述符数字。返回的描述符总是在进程中当前没打开的最小描述符。
- flags参数指明了进程打算如何访问这个文件
flags参数:
- O_RDONLY:只读。
- O_WRONLY:只写。
- O_RDWR:可读可写。
- O_CREAT:如果文件不存在,就创建它的一个截断的(空)文件。
- O_TRUNC:如果文件存在就截断它。
- O_APPEND:在每次写操作前,设置文件位置到文件结尾处。
- mode参数指定了新文件的访问权限位, 同时作为上下文的一部分,每个进程都有一个umask,其通过umask函数来设置。文件的访问权限=mode&(~umask)。
访问权限位:
进程通过close函数关闭一个打开的文件。
关闭一个已关闭的描述符会出错。
读和写文件
程序通过调用read和write函数来执行输入和输出的。
注:size_t:被定义为unsigned int,ssize_t被定义为int。
RIO包
RIO包会自动处理读写文件值出现的不足值。其提供了两类不同的函数:
- 无缓冲的输入输出函数:这些函数直接存在存储器和文件之间传送数据,没有应用级缓冲·。它们将对二进制数据读写到网络和从网络中读写二进制数据尤其有用。
- 带缓冲的输入函数:这些函数允许高效地从文件中读取文本行和二进制数据,这些文件的内容缓存在应用级缓冲区内,类似于为像printf这样的标准I/O函数提供的缓冲区
元数据
元数据即文件的信息。应用程序能通过调用stat和fstat函数检索元数据。
内核表示打开文件的数据结构
- 描述符表:每个进程都有它独立的描述符表,它的表项是由进程打开的文件描述符来索引的。每个打开描述符表项指向文件表中的一个表象。
- 文件表:打开文件的集合是由一个张文件表来表示的,所有进程都共享这张表。每个文件表的表项组成包括当前文件位置、引用计数(即当前指向该表的描述符项目数),以及一个指向v-node表中对应表项的指针。关闭一个描述符会减少相应的文件表表项中的引用记数。内核不会删除这个文件表表项,直到他的引用计数为零。
- v-node表:同文件表一样,所有的进程共享这张v-node表。每个表项都包含stat结构中的大多数信息包括st_mode和st_size成员。
I/O重定向
Unix外壳提供I/O重定向操作符,允许用户将磁盘文件和标准输入输出联系起来。一般通过调用dup2函数实现I/O重定向。
标准I/O
ANSI C定义了一组高级输入输出函数,称为标准I/O库,为程序员提供Unix I/O的较高级别的替代。
该库提供:
- 打开和关闭文件的函数。
- 读和写字节的函数。
- 读和写字符串的函数。
- 复杂的格式化的I/O函数。
标准I/O库将一个打开的I/O库将一个打开的文件模型化为一个流。对于程序员而言,一个流就是一个指向FILE类型的结构的指针。每个ANSI C程序开始时都有三个打开的流stdin、stdout和stderr,分别对应于标准输入、标准输出和标准错误:
FILE的流是对文件描述符和流缓冲区的抽象。
流缓冲区的目的(与RIO读缓冲区的一样):使开销较高的Unix I/O系统调用的数量尽可能小。
遇到问题
问题:
使用课本上定义的csapp.h编译错误。
解决方法:
从同学那获取了官网的csapp.h头文件,即可通过编译。
参考资料
《深入理解计算机系统》第10章系统级I/O。
系统级I/O学习记录的更多相关文章
- 系统级IO实践学习记录
代码分析 cp1.c 功能:复制文件. #include <stdio.h>#include <stdlib.h>#include <unistd.h>#inclu ...
- ARMV8 datasheet学习笔记4:AArch64系统级体系结构之存储模型
1.前言 关于存储系统体系架构,可以概述如下: 存储系统体系结构的形式 VMSA 存储属性 2. 存储系统体系结构 2.1. 地址空间 指令地址空间溢出 指令地址计算((address_of ...
- ARMV8 datasheet学习笔记4:AArch64系统级体系结构之编程模型(1)-EL/ET/ST
1.前言 ARMV8系统级编程模型主要包括异常级别.运行状态.安全状态.同步异常.异步异常.DEBUG 本文主要对系统级编程模型做一个概要介绍 2. 异常级别 2.1 Exception level概 ...
- 02 | 日志系统:一条SQL更新语句是如何执行的? 学习记录
<MySQL实战45讲>02 | 日志系统:一条SQL更新语句是如何执行的? 学习记录http://naotu.baidu.com/file/ad320c7a0e031c2d6db7b5a ...
- ARMV8 datasheet学习笔记4:AArch64系统级体系结构之Generic timer
1.前言 2.generate timer 2.1 概述 提供了一个系统计数器,用来实时测量流逝的时间: 提供了一个虚拟计数器,用来测量某个虚拟机上流逝的虚拟时间: 定时器,每隔一段时间会触发事件,支 ...
- Python学习记录day6
title: Python学习记录day6 tags: python author: Chinge Yang date: 2016-12-03 --- Python学习记录day6 @(学习)[pyt ...
- IA32系统级架构总览(一) 实模式和保护模式
应用程序的编写大部分的时候是不必关心系统级架构的,最多学习一下平台所给的API即可,也就是我们通常说的黑箱子.但是在学习操作系统的时候,系统级架构是要关心的. 系统级架构很难学习,其中一个很大的原因是 ...
- 系统级性能分析工具perf的介绍与使用[转]
测试环境:Ubuntu16.04(在VMWare虚拟机使用perf top存在无法显示问题) Kernel:3.13.0-32 系统级性能优化通常包括两个阶段:性能剖析(performance pro ...
- Android开发技术周报176学习记录
Android开发技术周报176学习记录 教程 当 OkHttp 遇上 Http 2.0 http://fucknmb.com/2018/04/16/%E5%BD%93OkHttp%E9%81%87% ...
随机推荐
- 捡火柴的Nova君(n个线段相交问题)
题目来源:https://biancheng.love/contest-ng/index.html#/41/problems 捡火柴的Nova君 题目描述 南方没暖气,怕冷的的宝宝们只能用火柴取暖.然 ...
- [VMware]设置VM虚拟机随系统自动启动
设置步骤: 1.找到VM的安装路径,右键vmware发送到桌面快捷方式 2.右键桌面快捷方式的属性,看到目标的属性框 3.找到需要自启动的虚拟机路径,如: D:\QC_VM\Clone of Wind ...
- SAM4E单片机之旅——15、触屏输入与SPI通信
开发板上配了一个电阻触摸屏,它的控制器是ADS7843,使用SPI进行通信.这次实现的功能是通过SPI接口与该控制器交互,获取触摸屏点击的坐标,并显示在LCD上.略为难点的是SPI作为同步时钟的一种, ...
- SQL Server 2008 R2——VC++ ADO 操作 重复利用_CommandPtr
==================================声明================================== 本文原创,转载在正文中显要的注明作者和出处,并保证文章的完 ...
- VMware Workstation不可恢复的错误:(vmui)
虚拟机中部署项目,由于项目的日志是gbk的,就把虚拟机中linux编码改成gbk了,结果问题来了,日志显示中文正常了,但是虚拟机运行一下就出错了,注意虚拟机出错,并没导致linux也挂掉,只是linu ...
- MAPR 开发环境搭建过程记录
我下载了MAPR 官方提供的virtualbox 和 vmware版本的sandbox进行试用. 开始试用了一会vmware版的,因为不太熟悉vmware的操作,而且vmplayer经常没有反应,后来 ...
- NOIP2013普及组 -SilverN
T1 计数问题 题目描述 试计算在区间 1 到 n 的所有整数中,数字 x(0 ≤ x ≤ 9)共出现了多少次?例如,在 1 到 11 中,即在 1.2.3.4.5.6.7.8.9.10.11 中, ...
- HttpClient如何解决302重定向问题
最近的接口测试,发现接口地址报302错误,通过上网搜索,发现问题所在,解决办法是需要请求重定向后的URI. package com.btv; import org.apache.http.Header ...
- 【Ext.Net学习笔记】07:后续
这些笔记都是在这个地址看到的:http://www.qeefee.com/category/extnet 然后跟着敲,去理解的. Ext.NET其实就是基于跨浏览器的ExtJS库和.NET Frame ...
- ZBrush中的纹理-水手该怎样进行绘制
如下是一张使用ZBrush3D图形绘制软件绘制的栩栩如生的水手图片,那么有人要问了,如何创建水手渲染的皮肤纹理呢?接下来,小编将教大家学习如何创建皮肤颜色,顺便说一下,这里所选取的颜色仅仅是在ZBru ...