操作系统的存储管理

为了方便计算机用户,操作系统提供信息存储的统一逻辑视图。操作系统对存储设备的物理属性进行了抽象,并定义了逻辑存储单元,即文件(file)。操作系统映射文件到物理媒介,并通过存储设备来访问文件。

文件系统管理

文件管理是操作系统最明显的组件之一。计算机可在多种类型的物理介质上存储信息,最常用的有硬盘、光盘和磁带等。每种介质都有各自的特点与物理组织。每个介质都由一个设备来控制,如磁盘驱动器或磁带驱动器等。它们都有自己的特点,包括访问速度、容量、数据传输率和访问方法(顺序或随机)等。

文件是创建者定义的相关信息组合。通常,文件内容为程序(源程序和目标程序)和数据。数据文件可以是数值的、字符的、字符数值的或二进制的等。文件可以没有格式(例如文本文件),或有严格格式(例如固定的域)。显然,文件这一概念是极为广泛的。

操作系统管理大容量存储介质,如磁盘和磁带,并控制它们,以实现文件这一抽象概念。再者,为了方便使用,文件可组织成目录。最后,当多个用户访问文件时,需要控制哪个用户如何访问文件(例如,读、写、附加)。

操作系统负责文件管理的以下活动:
  • 创建和删除文件。
  • 创建和删除目录,以便组织文件。
  • 提供文件和目录的操作原语。
  • 映射文件到外存。
  • 备份文件到稳定(非易失的)存储介质。

大容量存储器管理

由于内存太小不能容纳所有数据和程序,再加上掉电会失去数据,所以计算机系统应该提供外存以备份内存。

大多数现代计算机系统采用硬盘作为主要在线存储介质,来存储程序和数据。大多数程序,如编译程序、汇编程序、字处理器、编辑器和格式化程序等,存储在硬盘上,执行时才调入内存。它们在执行时将硬盘作为处理的起源和终点。因此,硬盘的妥善管理对计算机系统尤为重要。

操作系统负责有关硬盘管理的以下活动:
  • 空闲空间管理;
  • 存储空间分配;
  • 硬盘调度;

由于外存使用频繁,因此使用应该高效。计算机运行的最终速度与硬盘子系统的速度和管理该子系统的算法有很大关系。

虽然有的存储相比外存速度更慢、价格更低(或许容量更大),但是也有许多用处,如备份磁盘的数据、存储很少使用的数据、保存长期的档案等。典型的三级存储(tertiary storage)设备包括:磁带驱动器及其磁带、CD/DVD 驱动器及光盘等。这些介质(磁带和光盘)分为一次写多次读(Write-OnceRead-Many-times,WORM)和读-写(Read-Write,RW)。

三级存储对系统性能并不关键,但也应管理好。有的操作系统直接管理,还有的留给应用程序来管理。操作系统的功能可以包括:安装和卸载设备媒介,为进程互斥使用而分配和释放设备,以及将数据从二级存储移动到三级存储。

二级和三级存储的管理技术将在后续章节加以讨论。

高速缓存

高速缓存(caching)有时也简称为缓存,是计算机系统的一条重要原理。它的工作原理是:信息通常保存在一个存储系统中(如内存),使用时,它会被临时复制到更快存储系统,即高速缓存;当需要特定信息时,首先检查它是否处于高速缓存,如果是,可以直接使用高速缓存的信息,如果否,就使用位于源地的信息,同时将其复制到高速缓存以便下次再用。

另外,可编程的内部寄存器(如索引寄存器)为内存提供高速缓存。程序员(或编译程序)通过寄存器分配与寄存器替换的算法,决定哪些信息应存在寄存器中而哪些应存在内存中。

还有的高速缓存完全通过硬件实现。例如,大多数系统都有一个指令的高速缓存,用以保存下个需要执行的指令。如没有这一高速缓存,CPU 要用多个时钟周期才能从内存中获得指令。基于类似原因,大多数系统在存储层次结构中有一个或多个高速缓存。本教程并不关心只用硬件的髙速缓存,这是因为它们不受操作系统控制。

由于高速缓存的大小有限,因此高速缓存管理(cache management)的设计就很重要。慎重选择高速缓存大小与置换策略,可以极大提高性能。表 1 比较了大型工作站与小型服务器的存储性能。关于软件控制的各种高速缓存的置换算法,也将在后续章节加以讨论。

表 1 各种级别存储的性能
级别 1 2 3 4 5
名称 寄存器 高速缓存 内存 固态盘 硬盘
典型尺寸 <1KB < 16MB <64GB <1TB <10TB
实现技术 具有多个端口CMOS的定制内存 片上或片外 CMOS SRAM CMOS SRAM 闪存 硬盘
访问时间(ns) 0.25~0.5 0.5 ~ 25 80 ~ 250 25 000 ~ 50000 5 000 000
带宽(MB/sec) 20 000 ~ 100 000 5 000 ~10 000 1 000 ~ 5 000 500 20 ~150
由谁管理 编译器 硬件 操作系统 操作系统 操作系统
由谁备份 高速缓存 内存 硬盘 硬盘 硬盘或磁带

内存可以看作外存的高速缓存,这是因为外存数据应先复制到内存以便使用,而且数据应位于内存中才可保存到外存。永久驻留在外存上的文件系统的数据,会位于存储层次的多个层次上。在最高层上,操作系统可在内存中保存一个文件系统数据的高速缓存。

另外,固态盘也可作为高速存储,并可通过文件系统接口来访问。大容量的外存为磁盘。磁盘存储又通常可以用磁带或移动磁盘来备份数据,以防止因磁盘损坏造成的数据丢失。有的系统将位于磁盘上的旧文件数据自动备份到三级存储,如磁带塔,以便降低存储费用。

存储层次间的信息移动可以是显式的,也可以是隐式的,这取决于硬件设计和操作系统的控制软件。例如,高速缓存到CPU或寄存器的数据传递,通常通过硬件完成,无需操作系统干预。相反,磁盘到内存的数据传递通常通过操作系统控制。

在层次存储结构中,同一数据可能出现在存储系统的不同层次上。例如,位于文件 B 的整数 A 需要加 1,而文件 B 位于磁盘。加 1 操作这样进行:先进行 I/O 操作以将 A 所在的块调入内存。之后,A 被复制到高速缓存和内部寄存器。这样,A 的副本出现在多个地方:磁盘上、内存中、高速缓存中、内部寄存器中(见图 2)。

整数 A 从磁盘到寄存器的迁移
图 2 整数 A 从磁盘到寄存器的迁移

一旦在内部寄存器中执行加法后,A 的值在不同存储系统中就会不同。只有在 A 的新值从内部寄存器写到磁盘时,A 的值才会一样。

对于每次只有一个进程执行的计算环境,这种安排没有问题,这是因为所访问的整数 A 是位于层次结构的最高层的副本。但是,对于多任务环境,CPU 会在多个进程之间来回切换,所以需要十分谨慎以便确保在多个进程访问 A 时,每个进程都能得到最近更新的 A 值。

对称多处理的体系结构
图 3 对称多处理的体系结构

对于多处理器环境,情况就变得更为复杂,这时每个 CPU 不仅有自己的内部寄存器,而且还有本地的高速缓存(见图 3)。对于这种环境,A 的拷贝可能出现在多个缓存上。由于多个 CPU 可以并行执行,应确保位于一个高速缓存的 A 值的更新,应马上反映到所有其他 A 所在的高速缓存。这称为高速缓存一致性(cache coherence),这通常是硬件问题(在操作系统底下处理)。

对于分布式环境,这种情况变得异常复杂。在这种情况下,同一文件的多个副本(或复制)会出现在不同场所的多个不同计算机上。由于各个副本可能会被并发访问和更新,所以应该确保当一处的副本被更新时,所有其他副本应尽可能快地得以更新。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


起步 处理器架构,参考 x86是指intel的开发的一种32位指令集 intel和amd早期的cpu都支持这种指令集 AMD比Intel率先制造出了商用的兼容x86的CPU,AMD称之为AMD64 Intel选择了设计一种不兼容x86的全新64为指令集,称之为IA-64,后来支持AMD64的指令集,
pscp pscp -P 22 C:\work\test.txt root@192.168.1.5:/home/data pscp -P 22 root@192.168.1.5:/home/data/test.txt C://work// 检索 find / -name default.config
文件处理 ls -a # 显示所有文件 ls -l # 显示详细信息 ls -d # 显示路径 mkdir /目录名称 # 创建目录 cd /目录名称 # 切换目录 pwd # 显示当前路径 rmdir /目录名称 # 删除目录 cp -rp [目录名称] [目标目录] # 复制目录到目标目录 cp
准备一台电脑(我就用联想拯救者r7000演示) 参考博客制作启动盘 插上U盘,启动电脑,一直按F2 进入如下页面后,将U盘设置为第一启动项,点击exit,保存并退出 之后进入如下页面,选择第三项 进入如下页面,选择第四项 进入如下页面,选择第一项,选中后,先不要点Enter 按e键,将inst.st
认识 Linux系统是参考了UNIX系统作为模板开发的,但没有使用UNIX的代码;是UNIX的一种,但不是衍生版 在Linux内核的基础上开发是发行版 分区 逻辑分区永远从5开始 步骤 挂载:可理解为分配盘符,挂载点即是盘符名;不同之处:Linux中是以空目录名称作为盘符 Hda 第一块硬盘 Hda
文件处理命令 以 . 开头的文件是隐藏文件 以 - 开头表示这是一个文件 以 d 开头表示是一个目录 以 l 开头表示是一个软链接 第一个root是所有者,第二个root是所属组 ls -h 以文件默认大小后缀 显示 ls -i 查看i节点(唯一标识) 所有者:只能有一个,可变更 所属组:只能有一个
参考 01 02 03 前提环境 本地安装VirtualBox,并安装CentOS8,配置网络后,window系统上putty能连接到CentOS8服务器 配置步骤 右键服务器复制 启动复制后的服务器,查看ip和hostname发现和原来的服务器一样,需要修改 hostname # 查看主机名 vi
文件搜索命令 星号匹配任意字符,问号匹配任意单个字符 -iname 根据文件名查找且不区分大小写 -ok 命名会有一个询问的步骤 如果没有找到指定文件,可输入命令:updatedb 更新文件资料库;除tmp目录不在文件资料库收录范围之内 locate -i 文件名 # 检索时不区分大小写 which
安装环境 安装最新版的Virtual Box,点击安装 下载centos8镜像 创建虚拟机,可参考 选择下载到本地的镜像 设置启动顺序 点击启动 启动过程中报错:“FATAL:No bootable medium found!” 1.没有选择iso镜像 2.光驱没有排在第一位置 3.镜像只能选择x8
Linux严格区分大小写 所有内容文件形式保存,包括硬件 Linux不靠扩展名区分文件类型 挂载:将设备文件名和挂载点(盘符)连接的过程 Linux各个目录的作用 bin表示二进制 服务器注意事项 远程服务器不允许关机,只能重启 重启时应该关闭服务 不要在服务器访问高峰运行高负载命令 远程配置防火墙
IDE连接Linux,上传下载文件 参考1 参考2 连接Linux 上传下载文件 本地项目打包后上传 查看是否上传成功,右键下载 补充 后端项目开发完成后,需clean掉临时文件target文件夹,且只推送修改过的文件 前端项目开发的过程中,需要在每个子组件中使用scoped,确保每个子组件中的编码
起步 LTS与普通版本的区别 LTS版本的发布周期更长,更加稳定 安装jdk sudo mkdir /usr/lib/jvm # 在Ubuntu中创建目录 pscp D:\安装包\linux源码包\jdk-8u291-linux-x64.tar.gz chnq@192.168.0.102:/tmp
前言 最近在b站上看了兄弟连老师的Linux教程,非常适合入门:https://www.bilibili.com/video/BV1mW411i7Qf 看完后就自己来试着玩下,正好手上有台空闲的电脑就尝试不使用虚拟机的方式安装Linux系统 安装步骤 制作启动盘 下载ISO镜像,我这里下载的是Cen
新建虚拟电脑 设置内存和处理器 设置硬盘大小 完成 设置 查看光驱 设置启动顺序 点击启动 选择第1项 进入图形安装界面 选择安装位置,开始安装 设置root密码 重启 登录 查看本地文件夹 配置网络,点击设置 查看宿主机ip C:\Users\ychen λ ipconfig 无线局域网适配器 W
源码包安装需手动下载后安装 二进制包则在package目录下 rpm命令管理rpm包 若某个rpm包依赖于某个模块,需要到网站www.rpmfind.net查询该模块依赖的包,安装这个包后自动安装模块,之后就能安装rpm包了 安装升级时使用包全名 查询卸载时使用包名 虚拟机中的Linux系统安装rp
首先进入命令模式,再输入以下命令 命令模式用于输入命令 插入模式可对文件编写操作 编辑模式下的命令是在冒号后输入 :12, 15d # 删除指定范围的行,这里是删除12到15行 :n1,n2s/old/new/g ## 表示从n1行到n2行,old表示旧的字符串 vim使用小技巧:自定义快捷键,如快
使用源码包安装,需要自己指定安装位置,通常是 /usr/local/软件名/ linux中要想启动执行文件,应使用绝对路径 /绝对路径/rpm包名 start ## 执行方式一 service rpm包名 start ## 执行方式二 使用源码包安装后,由于自定义安装路径,就不能使用service命
网络命令 在收邮件的用户中,输入 mail 可查看邮件信息,输入序列号查看详细信息 在mail命令下,输入h 查看所有邮件的列表 输入:d 序列号 # 删除邮件 last # 统计所有用户登录或重启时间,用于日志查询 lastlog # 显示包括未登录用户的登录时间 lastlog -u 用户id
若要使用yum管理,必须能连接网络,首先配置网络IP 进入yum源文件中启动容器 使用yum源头安装rpm包不需要进入package路径,同时也不需要使用包全名,会有yum自动管理 安装软件组
简介 client即是本机安装的docker,相当于git Docker_host相当于centos系统 registry则是docker仓库,相当于GitHub 镜像用于创建docker容器,一个镜像可以创建多个docker容器 容器是由镜像创建的运行实例,(镜像相当于类,容器相当于类创建的对象)