小福蝶快去学习
小福蝶快去学习

【已更新】北航计算机学院考研知识点总结(专业课961)

#文档整理不易，有偿资料详讯wechat：_129Ww

961复习要点

文章目录

  • 961复习要点
    • 计组
      • 概述
        • 计算机组成与结构概述
          • 基本组成
          • 计算机的功能
        • 计算机中数的表示
          • 基本约束：采用二进制，只有0和1
        • 计算机的基本工作过程
      • 总线与输入输出控制方式
        • 总线分类
        • 总线特性
        • 总线仲裁(控制)方式
        • 总线传输的五个阶段
        • 总线的通信控制方式
        • I/O设备
          • I/O设备的分类
          • I/O设备的编址方式
        • I/O与主机信息交换的控制方式
      • 虚拟存储系统
        • 辅助存储器(外存)
          • 磁表面存储器：磁介质+磁头
          • 硬磁盘存储器——数据结构与格式
        • 虚拟存储器(虚存)
          • 虚存空间与物理空间
          • 虚拟存储器的调度方式
          • 页式虚拟存储器
        • 页目录自映射
          • ====>自映射
          • 构建方法（记忆）
      • 主存储器
        • 存储器分类
        • 存储单元电路
        • 存储器芯片结构
        • 存储器扩展
        • DRAM的刷新
          • 刷新操作：读操作
          • 刷新特点
          • 刷新方式
      • 指令系统与MIPS汇编
        • 机器指令的要素
        • 指令类型
          • 操作数类型
          • 操作数的位置
          • 操作数存储方式
        • 机器指令
        • 指令长度
        • 寻址方式
        • 常用寻址方式
        • MIPS指令格式
          • MIPS汇编中的算数、逻辑和移位运算
          • MIPS指令大全
      • MIPS处理器设计
        • 处理器设计概述
          • 处理器的功能与组成
        • 计算机性能评价
          • 响应时间与吞吐量
    • 计网
      • 应用层
        • 应用层概述
        • Socket(套接字)
        • WWW(万维网)
        • 文件传输协议FTP(File Transfer protocol)
        • 电子邮件
        • 域名服务
        • 简单网络管理协议SNMP
      • 传输层
        • 传输层协议概述
        • 用户数据报协议UDP
        • 传输控制协议TCP
        • TCP报文段的首部格式
        • TCP可靠传输的实现
          • 超时重传时间的选择
        • TCP的流量控制
          • 滑动窗口——实现可靠传输和流量控制
        • TCP的拥塞控制
          • 拥塞概念：
          • 拥塞控制
          • 流量控制
          • ==RFC2581定义的4种拥塞控制方法==
            • 慢启动的工作过程
        • TCP的连接管理
          • 三个阶段——“C/S方式”
          • 连接建立——三次握手
          • 连接释放——可由任意方发起
      • 网络层
        • 网络层模型
        • 网际协议IP
        • IP数据报格式
          • 组成：头部+数据
          • 划分子网和构造超网
            • 划分子网
            • 构造超网
        • 网际控制报文协议ICMP
        • 路由算法及协议
          • 距离向量路由算法
          • 链路状态路由算法——构造全网拓扑结构图
            • OSPF的5种分组
          • 路由器
          • IP组播
        • 虚拟专用网VPN和网络地址转换NAT
      • 数据链路层
        • 概述
        • 点对点协议PPP
        • 介质访问控制
          • 以太网的核心——CSMA/CD
          • 以太网的MAC层
        • 局域网互连
          • 在物理层扩展局域网
          • 在数据链路层扩展局域网
      • 物理层
        • 基本概念
          • 主要任务：传输比特流
          • 四个特性：
          • 数据通信的基础知识
          • 物理层下面的传输介质
          • 信道复用技术
          • 数字传输系统
          • 宽带接入技术
      • 总结
        • 计算机网络的性能
        • OSI体系结构、TCP/IP体系结构、五层体系结构
    • 操作系统
      • PV操作
        • 同步与互斥问题
        • 基于忙等待的互斥方法
        • 基于信号量的方法
        • 基于管程的同步与互斥
        • ==经典同步与互斥问题==
        • 死锁
      • I/O系统
        • I/O设备
        • 设备与控制器间接口
        • ==I/O控制技术==
        • 缓冲技术
          • 假脱机技术SPOOLing
        • 磁盘
      • 文件系统
        • 文件系统的基本概念
          • 文件系统模型的三个层次
          • 文件名
          • 文件类型
          • 文件的逻辑结构
          • 文件物理结构
          • 文件存取方式及存储介质
        • 文件系统的实现方法
        • 目录
          • 目录分级
            • 单级目录
            • 二级目录
            • 多级目录
          • 文件控制块
          • 文件描述符
        • 文件系统实例分析
      • 进程与线程
        • 进程的概念
          • 进程的引入
        • 进程的状态与控制
            • 进程上下文切换
            • 陷入内核
            • 系统调用
          • 线程：将资源与计算分离，提高并发效率
            • 进程与线程
          • 区分
        • CPU调度
          • 调度
          • 调度的类型
          • 进程切换
            • 时机
            • ==步骤==
            • 面向用户的调度性能准则
            • 常用调度算法
          • 交互式系统的调度算法
            • 时间片轮转
            • 多级队列
            • 多级反馈队列
      • 内存管理
        • 基本概念
        • 碎片
          • 紧凑技术
          • 分区的存储保护
          • 扩充内存的两种方法
          • 分区式内存管理
        • 页式内存管理
          • 基本思想
          • 纯分页系统
          • 基本概念
          • 数量关系
          • 页表
          • 页表查找(地址变换机构)
          • 页表的分级
            • 一级页表
            • 二级页表
        • 快表(联想存储器)，TLB

计组

概述

计算机组成与结构概述
基本组成
  1. 硬件：物理部分，实现计算机最基本的操作行为
  2. 软件：使计算机实现各种功能的程序集合，包括系统软件、应用软件两大类
计算机的功能
  • 数据处理
  • 数据存储
  • 数据移动、交换
  • 控制
计算机中数的表示
基本约束：采用二进制，只有0和1

  • 无符号数：所有位均为数值位，没有符号位

    • 表示 > = 0 >=0 >=0的正整数
    • 16位无符号数的表示范围：0～65535

  • 有符号数

    • 设符号位 ‘0’表示正，‘1’表示负，固定为编码的最高位
    • 真值与机器数：取反加一

  • 定点数——固定小数点的小数

    • 定点小数

    • 定点整数

  • 原码

    • 易于理解
    • ‘0’的表示不唯一——正‘0’、负‘0’
    • 机器实现加减运算的方法不统一
    • 需对符号位进行单独处理，不利于硬件设计

  • 反码

  • 补码

    • ‘0’的表示唯一
    • 机器实现加减运算的方法统一——模运算
    • 符号位参加运算，不需要单独处理

  • 浮点数的一般表示法

    • S × 2 j S\times 2^{j} S×2j
      • 分为阶数和尾数两个部分
      • 阶码：定点整数
      • 计算：
      • 溢出问题
计算机的基本工作过程
  • 指令的含义
    • 机器指令：计算机硬件可以执行的表示一种基本操作的二机制代码
    • 指令格式：操作码+操作数(操作数地址)
    • 计算机采用程序计数器(Program Counter)来决定指令执行的顺序
    • 微操作：计算机可以完成的最基本的操作，一条机器指令的执行可以解释为一系列的微操作的执行

浮点数除法运算的三个基本步骤是：尾数相除、指数相减、结果规格化

某计算机字长为8位，则带一位符号位的补码形式的机器数所能表示的最小定点整数是-128，最大定点整数是127.

若机器数字长为5位(最高一位为符号位)，x的真值是 ( − 0.1001 ) 2 (-0.1001)_{2} (−0.1001)2​，y的真值是 ( 0.0101 ) 2 (0.0101)_{2} (0.0101)2​

  1. 机器数 [ x ] 补 [x]_{补} [x]补​、 [ y ] 补 [y]_{补} [y]补​分别是多少
  2. 采用补码减法运算，机器数 [ x − y ] 补 [x-y]_{补} [x−y]补​是多少？运算结果是否溢出？

在IEEE754中，单精度浮点数表示公式为 ( − 1 ) S × 1. m × 2 ( E − 127 ) (-1)^S\times 1.m\times2^{(E-127)} (−1)S×1.m×2(E−127)，可采用32位2进制数格式表示，从左到右分别是：数符 S S S，占1位；阶码 E E E，占8位；尾数 m m m，占23位。

  1. 采用二进制格式写出该单精度浮点数IEEE754表示
  2. 采用十六进制格式写出该单精度浮点数IEEE754表示

总线与输入输出控制方式

总线分类

  1. 片内总线

    CPU内部的总线。是CPU内部各寄存器之间、寄存器

    与ALU之间传递信息的公共通道

  2. 系统总线

    1. 数据总线
    2. 地址总线
    3. 控制总线

  3. 通信总线

    用于计算机系统间或计算机系统与其他系统的通信

总线特性
  1. 机械特性
  2. 电气特性
  3. 功能特性
  4. 过程特性
总线仲裁(控制)方式

  1. 分布式控制方式

  2. 集中式控制方式(总线控制逻辑集中于一处)

    1. 链式查询方式

      • 总线控制器收到总线申请BR，BG逐个往下传
      • 遇到某接口有总线申请，BG停止往下传
      • 该接口获得总线控制权，并建立总线忙信号BS

      优点：线少，易扩充

      缺点：故障敏感，优先级固定

    2. 计数器定时查询方式（公平）

      • 总线控制器收到总线申请BR，计数器开始计数
      • 当某个有总线申请的设备地址与计数器一致，便获得总线使用权，并建立总线忙信号BS

      优点：优先级灵活

      缺点：每个设备都需与新增的设备地址线相连，线多

    3. 独立请求方式（公平）

      • 每个设备有独立的请求信号线与总线同意信号
      • 总线控制器根据设备的优先级决定将总线控制权交给哪个设备

      优点：响应快，优先级灵活，请求可屏蔽

      缺点：每个设备都有单独的总线请求信号线与总线同意信号线，线多

总线传输的五个阶段
  1. 请求总线
  2. 总线仲裁
  3. 寻址
  4. 地址传送
  5. 状态返回
总线的通信控制方式
  1. 同步通信控制方式——数据传输在统一的时钟同步信号的控制下进行
  2. 异步通信控制方式
    1. 不互锁
    2. 半互锁
    3. 全互锁
I/O设备
I/O设备的分类
  1. 按传送数据格式：串行接口、并行接口
  2. 按信息交换单位：
    1. 字符设备：用于数据输入输出；无结构类型——交互式终端机、打印机；不可寻址，在输入输出时常采用中断驱动方式
    2. 块设备：由于信息存取；有结构设备——磁盘；可寻址，以数据块为单位
  3. 按I/O方式：程序查询接口、中断接口、DMA接口、通道控制接口
  4. 按时序控制方式：同步接口、异步接口
I/O设备的编址方式
  1. 统一编址：存储器地址与I/O地址统一考虑，地址空间的一部分是存储器，另一部分是I/O，支持存储器操作的指令都可用于I/O操作——MIPS
  2. 独立编址：存储器地址与I/O地址分开，CPU具有专用的I/O指令，系统总线中具有区别存储器读写和I/O操作的控制信号，并以此区别地址总线上的地址是存储器地址还是I/O地址
I/O与主机信息交换的控制方式

  1. 程序查询方式

    • I/O操作由CPU直接完成（通过执行I/O指令完成）
    • 外设与CPU完全串行工作

  2. 程序中断方式

    • 中断

      1. 主程序：被中断的程序
      2. 中断源：引起中断的因素
        1. 人为设置：自愿中断，可重复
        2. 程序性事故：溢出、除零
        3. 硬件故障：电池掉电、磁盘损坏
        4. I/O操作：I/O设备准备就绪、请求操作
        5. 外部事件：键盘操作
      3. 中断服务子程序：处理中断事物的程序
      4. 中断向量：中断服务子程序的入口地址
      5. 中断向量表：保存所有中断向量的内存区域，一般固定

    • 中断I/O方式

      1. I/O操作仍然由CPU通过I/O指令完成
      2. 在外设准备阶段，CPU可以执行其他程序，仅在外设准备就绪后，CPU才中断正在执行的程序，处理I/O事务
      3. 在外设准备阶段，CPU与外设的工作可以认为是并行的
      4. 中断I/O方式是目前最主要的I/O方式

  3. 直接内存访问方式(DMA)

    1. CPU对总线的控制被临时禁止。DMA控制器接管总线控制权，
      控制数据直接在存储器与外设之间高速交换
    2. CPU不再介入具体的I/O操作，由DMA控制器来负责提供存储器地址信号、读写控制信号等
    3. CPU与I/O设备在更大的程度上并行工作，效率更高
    4. 数据传送结束后，通过中断方式告知CPU进行善后处理
    5. CPU仅在开始DMA操作之前和完成DMA操作之后参与
      I/O处理，在DMA过程中，CPU可以运行原来的程序
    6. DMA方式适合高速批量的数据传输，如视频显示刷新、磁盘存储系统的读写，存储器到存储器的传输等

    • DMA工作过程

    • CPU工作：初始化DMA控制块$\rightarrow D M A 请 求 DMA请求 DMA请求\rightarrow D M A 响 应 DMA响应 DMA响应 \rightarrow$ DMA操作**(周期窃取)**

    • CPU方式：周期窃取方式——单字传送方式；停止CPU访问内存——成组访问方式

    • 周期窃取：DMA控制器接到DMA应答信号后，通过控制逻辑向系统总线发送存储器地址信号、存储器读写控制信号、
      I/O接口读写控制信号等，完成一次数据传送。这些操作完全由硬件控制，一般仅需要一个总线存取周期，所以这种方式称为周期窃用（cycle-stealing)方式

  4. 通道方式

    • 分类

      1. 字节多路通道：不仅允许多个设备同时操作，且允许它们同时进行传输型操作；

        通道的数据传输率 ＝ 各外设的数据传输率之和

      2. 选择通道：一旦选择了一个外设，即使该外设没有准备好，也只能等待；

        通道数据传输率 ＝ 一台设备的数据传输率

      3. 数组多路通道：允许多个设备同时工作，但只允许一个设备进行传输型操作，其他设备进行控制型操作；通道数据传输率 ＝ 各设备数据传输率之和

    • 通道是一种专业控制器，具有自己的指令系统
      （基本上都是I/O指令）

    • 通道执行通道程序来实现和管理I/O，CPU基本
      上不需要管理I/O，CPU的效率得到更大的提高

    • 通道程序由OS根据I/O任务的需求自动生成，
      存放在存储器中，通道程序由OS管理，用户程序执行和访问通道程序

在常用的I/O控制方式中，要求主存与I/O设备之间有直接数据通路的方式是DMA方式

常见的几种总线仲裁方式中，对电路最为敏感的方式是链式查询方式

将网卡缓存器中的2000字节高效快速地传输到该计算机内存中，最合适的数据传输方式是DMA方式

在计数器定时查询总线仲裁方式下，若每次计数从上次计数的终止点开始，，则每个设备使用总线的机会相等

周期挪用常用于直接存储器存储方式的输入输出(DMA方式)

在独立请求总线仲裁方式下，若要支持N个设备，则应有N个总线请求信号和N个总线响应信号

若DMA采用周期窃取方式传送数据，则每传送一个字需占用一个存取周期的时间

中断向量是中断服务子程序的入口地址

I/O控制的四种方式：程序查询方式、访问中断方式、DMA方式、通道方式

按照信息交换的单位划分，I/O设备可以分为：字符设备和块设备

虚拟存储系统

辅助存储器(外存)
磁表面存储器：磁介质+磁头
硬磁盘存储器——数据结构与格式
  1. 盘面(磁头)Head
  2. 磁道(每个磁道包含的扇区数相同)Cylinder
  3. 扇区(最小访问单元)Sector

扇区地址：

存储容量：盘面数(磁头数) X 每盘面的磁道数 X 每磁道的扇区数 X 扇区容量

寻址时间：

数据传输率 Dr：单位时间内传输的数据位数（b/s）

廉价磁盘冗余阵列RAID(redundant array of inexpensive disks)

  • 通过把数据分成多个数据块（Block）并行写入/读出多个磁盘以提高访问磁盘的速度

  • 不同模式的RAID

    RAID0 RAID1 RAID2
    RAID3 RAID4 RAID5
虚拟存储器(虚存)
虚存空间与物理空间

用户编程空间：用户编制程序时使用的地址称为虚地址或逻辑地址，其对应的存储空间称为虚存空间或逻辑地址空间。虚存空间的用户程序按照虚地址编程并存放在辅存中

物理内存空间：计算机物理内存的访问地址称为实地址或物理地址，其对应的存储空间称为物理空间或主存空间

虚拟存储器的调度方式
  • 页式调度
  • 段式调度
  • 段页式调度
页式虚拟存储器

  • 虚存空间和主存空间按固定大小分成若干页，虚存页称为虚页，
    主存页称为实页。辅存中的程序按页调入内存

  • 虚地址格式(逻辑地址)；虚页号+页内地址——虚拟内存最大容量由计算机地址结构决定

  • 实地址格式(物理地址)：实页号+页内地址——物理内存大小决定实地址长度

  • 页表：记录虚页与实页的映射关系，实现虚实地址的转换；建立在内存中；页表用虚页号作为索引，页表项包括虚页对应的实页号和有效位

  • 页表的起始逻辑地址必须为页大小的整数倍

  • 页表寄存器：保存页表在内存中的首地址

  • 页内地址(页内偏移量)：页大小决定

  • 页表大小(假设所有虚页都在使用中)：虚页数*页表项位数——虚页号是页表的索引

  • 多级页表机制：将页表分页，当前使用的页的页表项所在页在内存，
    其余在外存，页表也采用按页交换机制

  • 当虚页不在内存时(装入位为0)，
    页表提供保存该虚页的磁盘地址，
    以便进行磁盘读取；有些系统采用双表结构：页表只提供虚页到实页的映射；由外页表提供虚页到磁盘地址的映射

  • 访存次数问题

  • 快表TLB(translation lookaside buffer):使用Cache存储部分活跃的页表项，称为TLB（快表），它包含了最近使用的那些页表项

    1. 内容：虚页号(标记TAG)、对应实页号(数据)、有效位、修改位
    2. 一般采用全相联模式——等价于组数为1的n路组相联
    3. TLB可以看作是主存中页表的副本，因此TLB有，页表中一定有；CACHE是主存数据块的副本，因此cache中有，主存中一定有
    4. 使用组相联时：虚页号由**组地址+tag**构成
    5. 存储管理单元MMU：将虚地址转化为实地址
    页目录自映射

    已知：

    • 页表要在虚拟空间中映射
      • 页表需要分页存储，存储页表的页面称为页表页
    • 页目录定义：页表页的地址映射
      • 1024个页表页逻辑上连续，物理上可以分散，其对应逻辑-物理映射关系记录在页目录中
      • 页目录占1页，每一个页目录项指向一个页表页
      • 所有页目录项对应整个地址空间

    又有

    • 存储页表的物理地址空间也是整个地址空间的一部分(要求初始位置与页大小对齐==页面大小的整数倍)
    • 页表的逻辑空间与物理空间映射关系记录在页目录中
    • 页表页同样记录页表的逻辑空间到物理空间的映射关系

    因此

    • 页目录与上述页表页内容相同，页目录无需额外分配单独的存储空间
    ====>自映射

    页目录自映射：页目录中有一条 P D E PDE PDE指向自身物理地址——页目录基地址

    构建方法（记忆）

    1. 已知页表基址 P T b a s e PT_{base} PTbase​要求该基址与页面大小对齐，即

      P T b a s e = ( ( P T b a s e > > 22 ) ) < < 22 PT_{base}=((PT_{base}>>22))<<22 PTbase​=((PTbase​>>22))<<22

      说人话就是页表基址的低22位全0

    2. 页目录基址 P D b a s e PD_{base} PDbase​在哪里？

      P D b a s e = P T b a s e ∣ P T b a s e > > 10 PD_{base}=PT_{base}|PT_{base}>>10 PDbase​=PTbase​∣PTbase​>>10

    3. 自映射页目录表项 P D E s e l f − m a p p i n g PDE_{self-mapping} PDEself−mapping​在哪里？

      P D E s e l f − m a p p i n g = P T b a s e ∣ ( P T b a s e ) > > 10 ∣ ( P T b a s e ) > > 20 PDE_{self-mapping}=PT_{base}|(PT_{base})>>10|(PT_{base})>>20 PDEself−mapping​=PTbase​∣(PTbase​)>>10∣(PTbase​)>>20

  1. 某机器字长为64位，内存容量为256MB，若按字编址，则其寻址空间为0～32M-1——按字编址，256MB/64bit=32M

  2. 进程可以使用的最大地址空间受限于地址位数

  3. 虚拟地址空间可以大于物理地址空间，也可以小于物理地址空间

  4. 某磁盘旋转速度为7200转/分钟，每磁道存储 1 M B 1MB 1MB数据。如果数据块大小为 4 K B 4KB 4KB，平均寻道时间为 6 m s 6ms 6ms，则读取一块数据的平均时间约为多少 m s ms ms

    • 寻道时间： 6 m s 6ms 6ms
  • 数据传输速率： ( 7200 / 60 ) r / s ∗ 1 M B = 1200 M B / s (7200/60)r/s*1MB=1200MB/s (7200/60)r/s∗1MB=1200MB/s
    • 旋转延迟时间： 1 / [ 2 ∗ ( 7200 / 60 ) ] = 0.00042 = 0.42 m s 1/[2*(7200/60)]=0.00042=0.42ms 1/[2∗(7200/60)]=0.00042=0.42ms
  • 传输时间： 4 K B / ( 1200 M B / s ) = 0.03 m s 4KB/(1200MB/s)=0.03ms 4KB/(1200MB/s)=0.03ms
    • 总访问时间=读取一块数据的平均时间=寻道时间+旋转延迟时间+传输时间= 6.45 m s 6.45ms 6.45ms

  1. 假设：某磁盘的可用盘面数为10，每个盘面的磁道数为100，磁盘分为8个扇区，每扇区存储512个字节，磁盘转速为6000RPM。主存与磁盘之间的数据传送采用DMA单字传送方式，单字长为32位。一条指令的最长执行时间是20微秒。

    请问：

    1. 该磁盘的容量是多少？ 10 × 100 × 8 × 512 b y t e s = 4000 k b y t e s 10\times100\times8\times512bytes=4000kbytes 10×100×8×512bytes=4000kbytes

    2. 该磁盘的数据传输率是多少？ ( 6000 / 60 ) × 8 × 512 b y t e s = 400 k b y t e s / s (6000/60)\times8\times512bytes=400kbytes/s (6000/60)×8×512bytes=400kbytes/s

    3. 是否可采用一条指令执行结束时响应DMA请求的方案，为什么？

      不能；

      传输单字： ( 32 / 8 ) / 400 k b y t e s / s = 0.01 × 1 0 − 3 s = 10 μ s (32/8)/400kbytes/s=0.01\times10^{-3}s=10\mu s (32/8)/400kbytes/s=0.01×10−3s=10μs；

      即约每隔 10 μ s 10\mu s 10μs就会有一次DMA传送请求，采取此方案会造成数据丢失。

  2. 假设一个内存管理系统有47位的虚拟空间，每页大小为16KB，并且页表项占用8位。在每级页表大小不超过1页的情况下，需要几级页表来完成虚拟地址的映射？给出虚拟地址的结构划分，并详细解释：

    每页最多可包含： 16 K B / 8 b i t = 16 K = 2 14 16KB/8bit=16K=2^{14} 16KB/8bit=16K=214个页表项，又页表以虚页号作为索引，故虚页号最大为14位;

    页内偏移量： 16 K B = 2 14 → 14 16KB=2^{14}\rightarrow 14 16KB=214→14故虚拟地址中页内偏移量为14位;

    可供页目录使用的地址空间最多有： 47 − 14 = 33 47-14=33 47−14=33;

    要求每级页表不超过一页—— 33 / 14 = 3 ( 向 上 取 整 ) 33/14=3(向上取整) 33/14=3(向上取整)至少需要3级页表

    (这里其实不太明白，但是感觉各级目录相等比较顺眼QAQ)

    33 / 3 = 11 33/3=11 33/3=11故每一级页目录均为11位；

    虚拟地址的结构划分：

    一级页目录 二级页目录 三级页目录 页内偏移量
    11位 11位 11位 14位

  3. 虚拟地址地址空间的大小仅取决于地址结构

  4. 页面越大，页面内部的内存碎片会越多；内碎片——分配给作业的存储空间中未被利用的部分

  5. 页面的大小会影响进程切换的速度

  6. 页面越大，运行程序所需的页面越少

  7. 现有一个容量为4GB的磁盘分区，磁盘空间以簇为单位进行分配，簇的大小为4KB，若采用位图法管理该分区的空间，即用一位(bit)标识一个簇是否被分配，则存放该位图所需簇的个数为：

    需要 4 G B / 4 K B = 2 20 4GB/4KB=2^{20} 4GB/4KB=220个簇

    每个簇用一位标识—— 2 20 2^{20} 220位

    每个簇可以存放 2 12 × 2 3 = 2 15 2^{12}\times2^{3}=2^{15} 212×23=215位

    需要 2 20 / 2 15 = 32 2^{20}/2^{15}=32 220/215=32个簇存放

  8. 假设只考虑页内碎片和页表引起的额外内存。如进程本身占用内存的平均大小是1MB，每个页表项的大小是8B，为减少额外的内存开销，页面大小应设置为：

    页内碎片：页大小决定==>取平均值(页内不产生碎片～整页分配后未使用)

    页表大小：页面数量决定(存放页面所需的内存大小)

    不妨设页面大小为 2 m B 2^{m}B 2mB；

    则进程所需的页面数量为 2 20 / 2 m = 2 20 − m 2^{20}/2^{m}=2^{20-m} 220/2m=220−m个；

    存放这些页面消耗的内存大小： 2 20 − m × 2 3 = 2 23 − m 2^{20-m}\times 2^{3}=2^{23-m} 220−m×23=223−m

    页内碎片平均值= ( 1 / 2 ) × 2 m = 2 m − 1 (1/2)\times 2^{m}=2^{m-1} (1/2)×2m=2m−1

    要使 2 m − 1 + 2 23 − m 2^{m-1}+2^{23-m} 2m−1+223−m达到最小：m=12；

主存储器

存储器分类

  • 按存储介质分

    1. 半导体存储器(易失性)
    2. 磁介质存储器(非易失性)
    3. 光盘存储器(非易失性)

  • 按访问方式分

    1. 随机访问存储器RAM
      1. SRAM：静态存储器，集成度低，不必刷新，用作CACHE存储器，对电器干扰相对不敏感
        • 工作原理：六晶体管，触发器
      2. DRAM：动态存储器，集成度高，需要定时刷新，用作主存储器，对电器干扰相对敏感
        • 工作原理：单晶体管，电容充放电
    2. 顺序访问存储器
    3. 直接访问存储器
    4. 只读存储器ROM

  • 按功能分

    1. 高速缓冲存储器(CACHE)
    2. 主存储器
    3. 辅助存储器
    4. 控制存储器

  • 存储器的层次结构

    二级存储系统 高速缓冲存储器 主存储器
    三级存储系统 高速缓冲存储器 主存储器 辅助存储器
存储单元电路
  1. 可存储1bit二进制代码
  2. 存储位元---->存储芯片---->存储器
存储器芯片结构
  1. 基本描述：字单元数 × \times ×字单元位数( 2 n × m 2^{n}\times m 2n×m)
  2. 一维地址结构
    1. 地址线n条——单向——经过译码变为 2 n 2^{n} 2n根地址选择线
    2. 2 n 2^{n} 2n选择线
    3. 数据线m位——双向
  3. 二维地址结构
    1. 行列相等时最佳
    2. 行地址线=列地址线= 2 n / 2 2^{n/2} 2n/2
    3. 2 × 2 n / 2 2\times2^{n/2} 2×2n/2地址选择线(行列复用则不需要乘2)
    4. 数据线m条——双向—— log ⁡ 2 m \log_{2}m log2​m位
存储器扩展
  1. 位扩展
    1. 拼接数据空间
    2. 地址总线不变，数据总线按扩展位数增加
    3. 片选信号位数不变
  2. 字扩展
    1. 拼接地址空间
    2. 地址总线按扩展位数增加，数据总线不变
    3. 片选信号按扩展后芯片数确定
  3. 混合扩展
    1. 混合扩展同时扩展了数据空间与地址空间
    2. 片选信号取决于字扩展，与位扩展无关
DRAM的刷新
刷新操作：读操作
刷新特点
  1. 按行刷新，所有芯片同时进行
  2. 刷新操作与CPU访问内存分开进行
  3. 刷新周期
  4. 刷新地址与刷新地址计数器
刷新方式

  1. 集中刷新(有 2 n 2^{n} 2n行；设刷新周期为2ms；读写周期为 0.5 μ s 0.5\mu s 0.5μs)

    在一个时间段内，刷新存储器所有行，此时CPU停止访问内存；另一个时间段内，CPU可以访问内存，刷新电路不工作

    • 集中刷新时间相当于 2 n 2^{n} 2n个读写周期被用于刷新，CPU不工作
    • 一个刷新周期中有 2 m s / 0.5 μ s = 4000 2ms/0.5\mu s = 4000 2ms/0.5μs=4000个读写周期，其中$2^{n}\times0.5\mu s $个读写周期用于刷新，剩余读写周期用于读/写或维持信息
    • 存在不能进行读写操作的死区时间

  2. 分散式刷新(有 2 n 2^{n} 2n行；设刷新周期为2ms；存取周期为 0.5 μ s 0.5\mu s 0.5μs)

    • CPU与刷新电路交替访问内存，一个存储周期刷新1行，下一个存储周期刷新另一行，直至最后1行后，又开始刷新第1行
    • 将存储周期分为用于读写与用于刷新两部分，不存在死时间，但变相增加了存取周期
    • 分散刷新间隔 = 刷新行数 X 存储周期 <= 刷新周期

  3. 分布式刷新

    • 保证在一个刷新周期内将存储芯片内的所有行刷新一遍，
      可能等时间间距，也可能不等
    • 刷新时间间隔=刷新周期 × \times ×行数
    • 可以减少死时间，同时保证性能

动态RAM依据电容充放电原理存储信息；静态RAM依据触发器原理存储信息。

构造 32 k × 32 b i t 32k\times32bit 32k×32bit的存储器共需64片 2 k × 8 b i t 2k\times8bit 2k×8bit的SRAM存储芯片

容量 1 M × 16 b i t 1M\times16bit 1M×16bit的DRAM存储芯片，如采用二维地址结构，且行地址和列地址的位数相同，则行译码器输出的行选择线有1024根，该芯片的刷新地址计数器是10位

用多个容量 1 k × 4 b i t 1k\times4bit 1k×4bit的存储芯片，组成容量为 64 k × 8 b i t 64k\times8bit 64k×8bit的存储器。若将这些芯片分装在几块内存板上，每块内存板容量为 16 k × 8 b i t 16k\times8bit 16k×8bit，则该存储器的地址线中，必须有2根地址线用于选内存板，4根地址线用于选芯片

容量为 32 k × 16 b i t 32k\times16bit 32k×16bit的存储器芯片，其地址线数量和数据线数量的总和为31

p.s：地址线是地址信号线，用于传送地址信息；地址选择线用于定位存储位元

某计算机的数据总线为8位，地址总线为20位，主存按字节编址，其中地址最低的256KB主存空间为只读系统程序区，其余为用户程序区，现有若干容量为 64 k × 8 b i t 64k\times8bit 64k×8bit的ROM芯片和容量为 256 k × 8 b i t 256k\times8bit 256k×8bit的DRAM芯片：

  1. 上述规格的DRAM芯片，若行地址和列地址共享同一组芯片管脚，则所需地址管脚多少根？芯片的刷新地址计数器是多少位？

    256 k = 2 18 − − − − > 行 地 址 管 脚 = 列 地 址 管 脚 = 2 9 = 512 根 ， 刷 新 地 址 计 数 器 的 位 数 = 总 行 数 位 数 = 9 位 256k=2^{18}---->行地址管脚=列地址管脚=2^{9}=512根，刷新地址计数器的位数=总行数位数=9位 256k=218−−−−>行地址管脚=列地址管脚=29=512根，刷新地址计数器的位数=总行数位数=9位

  2. 若DRAM芯片采用分布式刷新方式，且存储单元刷新间隔最长为4ms，则刷新周期是多少？

    ==？？？==分布式刷新方式 − − − − > ----> −−−−>刷新周期= 4 m s / 512 4ms/512 4ms/512

    查阅资料得*：对于每行以4ms为刷新周期足够了，刷新循环到它需要512刷新次操作， 4ms ÷ 512 作为每次刷新的周期，（注意每次刷新周期与特定行的刷新周期的不同：每次刷新间隔指对于内存来说它隔多长时间就进行一次刷新操作，轮着刷新时，刷新的行是上一次刷新的行的下一行——是不同的两行，但对于全局内存来说确实是两次刷新操作间隔。特定哪一行的刷新周期：下一次对它进行刷新的间隔，期间要经过64次内存刷新周期才又轮得到它。）

  3. 该计算机所允许的最大主存容量是多少？

    1. 地址总线为20位，数据总线为8位，按字节编址
    2. 2 20 × ( 8 b i t / 8 ) = 1 M B 2^{20}\times(8bit/8)=1MB 220×(8bit/8)=1MB

  4. 构建该计算机所允许的最大容量的主存，需用上述规格的ROM芯片和DRAM芯片各多少片？

    只读系统程序区 256 K B − − − − > R O M 256KB---->ROM 256KB−−−−>ROM， 256 / 64 = 4 256/64=4 256/64=4块

    DRAM芯片 768 K B − − − − > D R A M 768KB---->DRAM 768KB−−−−>DRAM， 768 / 256 = 3 768/256=3 768/256=3块

  5. 请给出每个ROM芯片和DRAM芯片在上述主存中的地址空间范围。

    2 20 = 1 6 5 − − − − > 5 2^{20}=16^{5}---->5 220=165−−−−>5位16进制地址码

    芯片 起 止
    ROM#1 0x00000H 0x0FFFFH
    ROM#2 0x10000H 0x1FFFFH
    ROM#3 0x20000H 0x2FFFFH
    ROM#4 0x30000H 0x3FFFFH
    DRAM#1 0x40000H 0x7FFFFH
    DRAM#2 0x80000H 0xBFFFFH
    DRAM#3 0xC0000H 0xFFFFFH

  6. 用于译码产生DRAM芯片片选信号的主存地址需多少位？

    3块DRAM芯片，需要2位主存地址确定

https://wenku.baidu.com/view/f34bca962ec58bd63186bceb19e8b8f67c1cef27.html

指令系统与MIPS汇编

机器指令的要素
  • 操作码
  • 源操作数地址
  • 目的操作数地址
  • 下条指令的地址：只有少数指令需要指明下一条指令的地址
指令类型
  • 数据传输指令：寄存器与存储器之间、寄存器之间传递数据
  • 算数/逻辑运算指令：寄存器中整型数或逻辑型数据的运算操作，以及处理浮点数运算的浮点运算指令
  • 程序控制指令：控制程序执行顺序，条件转移或跳转，子程序调用或返回
  • 其他指令：多用户多任务系统中的特权指令；复位/暂停/空操作等指令
操作数类型
  • 数值：无符号、定点、浮点
  • 逻辑型数、字符
  • 地址：操作数地址，指令地址
操作数的位置
  • 存储器(存储器地址)
  • 寄存器(寄存器地址)
  • 输入输出端口(输入输出端口地址)
操作数存储方式
  1. 大端存储：最高有效字节存储在地址最小位置
  2. 小端存储：最低有效字节存储在地址最小位置
机器指令

  • 计算机硬件可以执行的表示一种基本操作的二进制代码

    1. 指令格式：操作码+操作数(操作数地址)
    2. 操作码：指明指令的操作性质
    3. 操作数(地址)：指明操作数的位置(或操作数本身)

  • 操作数地址的数目

    1. 三地址：

      OP DES Add SUR1 Add Sur2 Add

    2. 双地址

      OP Des Add Sur Add

    3. 单地址：累加器作为其中一个操作数的双操作数型，或单操作数型

      OP Add

    4. 零地址：隐含操作数型，或无操作数型

      OP
指令长度
  • 定长指令系统：MIPS
  • 变长指令系统：一般为字节的整数倍，如80X86系统
寻址方式
  • 形式地址：指令中直接给出的操作数的地址编码
  • 有效地址：操作数在内存中的地址，可由形式地址和寻址方式计算得到
  • 寻址方式：根据形式地址，计算出操作数有效地址的方法
常用寻址方式
  • 立即寻址：操作数直接在指令代码中给出(立即寻址只能作为双操作数指令的源操作数)；操作数存放在指令中
  • 寄存器直接寻址：操作数在寄存器中，指令地址字段给出寄存器的地址
  • 寄存器间接寻址：操作数在存储器中，指令地址字段中给出的寄存器的内容是操作数在存储器中的地址
  • 基址寻址/变址寻址：
    • 基址寄存器+形式地址，操作数的内存地址是基址寄存器的内容与形式地址之和
    • 变址寄存器+形式地址：操作数的内存地址是变址寄存器的内容与形式地址之和
  • 相对寻址：基址寻址的特例，程序计数器PC作为基址寄存器；指令中给出的形式地址作为位移量
  • 堆栈寻址：操作数存放在存储器中，出栈、入栈
MIPS指令格式
  • MIPS只有三种指令格式，32位固定长度指令格式
    • R(register)类型：寄存器操作数计算，结果送寄存器
    • I(Immediate)类型：使用一个16位立即数作操作数
    • J(jump)类型：跳转指令，26位跳转地址
  • 最多三地址指令： add $t0,$s1,$s2
  • 对于Load、Store指令，单一寻址模式：Base+displacement
  • 没有间接寻址
  • 16位立即数——最大可表示
  • 简单转移条件：beq、beqz等
  • 无条件码
MIPS汇编中的算数、逻辑和移位运算
  • 溢出检测
    • 可以检测溢出异常：add、addi、sub
    • 不能检测溢出异常：addu、addiu、subu
  • MIPS算术指令只能操作寄存器，不能指令操作内存
  • 数据存取指令在内存和寄存器之间传输数据
  • 分支指令中：要和PC相加(或相减)的指令数，是从分支语句的下一条指令算起的
  • 字对齐：无论是lw还是sw，基址寄存器的值与偏移量的和始终应该是4的倍数——alignment：对象的起始地址一定要是字长的整数倍
    • 16-bit立即数使用补码表示，在需要分支的时候与PC相加
    • 因此可以分支到 P C ± 2 15 PC\pm2^{15} PC±215字节的地方
    • 改进：根据“字对齐”，其实可以分支到 P C ± 2 15 PC\pm2^{15} PC±215指令字即 P C ± 2 17 PC\pm2^{17} PC±217字节
    • P C = ( P C + 4 ) + ( i m m e d i a t e ∗ 4 ) PC=(PC+4)+(immediate*4) PC=(PC+4)+(immediate∗4)
    • J-Format指令中，目标地址为26-bit立即数，利用字对齐，可以表示出32-bit地址的低28bits，剩下的最高四位根据定义，直接从PC取得
MIPS指令大全

##待补充

MIPS处理器设计

处理器设计概述
处理器的功能与组成
  • 功能：控制指令执行
  • 指令执行过程：取指-取数-执行
  • 指令周期：取指周期-取数周期-执行周期
  • 功能部件
    • 指令地址部件
    • 指令寄存部件
    • 译码部件
    • 控制信号逻辑部件
    • 执行部件：ALU、寄存器等
  • CPU组成
    • 控制单元(Controller)
    • 执行单元(数据通路)

其余部分不作重点讲解

计算机性能评价
响应时间与吞吐量

  • 响应时间：从提交作业到作业完成所花费的时间

  • 吞吐量：一定时间间隔内完成的作业数

  • CPU执行时间：

    程 序 的 C P U 时 钟 周 期 数 × 时 钟 周 期 长 度 程序的CPU时钟周期数\times时钟周期长度 程序的CPU时钟周期数×时钟周期长度

    程 序 的 C P U 时 钟 周 期 数 时 钟 频 率 \frac{程序的CPU时钟周期数}{时钟频率} 时钟频率程序的CPU时钟周期数​

  • 程序的CPU时钟周期数： 程 序 指 令 数 × 每 条 指 令 的 平 均 时 钟 周 期 数 程序指令数\times每条指令的平均时钟周期数 程序指令数×每条指令的平均时钟周期数

  • C P I ： 指 令 平 均 执 行 时 钟 周 期 数 CPI：指令平均执行时钟周期数 CPI：指令平均执行时钟周期数

    • 不同指令集的CPI比较没有意义
    • C P U 的 时 钟 周 期 数 = ∑ C P I i × I i CPU的时钟周期数=\sum{CPI_i\times I_i} CPU的时钟周期数=∑CPIi​×Ii​
    • 平 均 时 钟 周 期 数 C P I = C P U 时 钟 周 期 数 / I C ( 指 令 的 条 数 ) 平均时钟周期数CPI=CPU时钟周期数/IC(指令的条数) 平均时钟周期数CPI=CPU时钟周期数/IC(指令的条数)
    • C P U 时 间 = C P U 时 钟 周 期 数 × 时 钟 周 期 长 = C P U 时 钟 周 期 数 / 频 率 = ( I C × C P I ) / f CPU时间=CPU时钟周期数\times时钟周期长=CPU时钟周期数/频率=(IC\times CPI)/f CPU时间=CPU时钟周期数×时钟周期长=CPU时钟周期数/频率=(IC×CPI)/f

  • MIPS：百万指令每秒

    • 不同指令集的MIPS比较没有意义
    • 同一台机器，不同的测试程序测出来的MIPS值也可能不一样
    • M I P S = I C 执 行 时 间 × 1 0 6 = I C ( I C × C P I ) × 1 0 6 / f = f C P I × 1 0 6 MIPS=\frac{IC}{执行时间\times 10^{6}}=\frac{IC}{(IC\times CPI)\times10^{6}/f}=\frac{f}{CPI\times10^{6}} MIPS=执行时间×106IC​=(IC×CPI)×106/fIC​=CPI×106f​
    • MFLOP：百万浮点操作数每秒

计网

应用层

应用层概述
  1. 所有网络协议均为了某种应用服务
  2. 应用层的许多协议大部分是基于client/server方式
    1. QQ、Weixin等使用私有协议
    2. HTTP、SSH等使用开放协议
    3. 均基于基于TCP、UDP、IP等底层协议
  3. 应用层协议运行在用户态，由应用程序负责管理；TCP/IP等协议运行在内核态，由操作系统负责管理；
  4. 应用程序使用网络时，需要调用操作系统提供的接口，即应用Socket API
Socket(套接字)

  1. 面向连接并发服务器——e.g TCP

  2. 无连接循环服务器——e.g UDP

    辨析：面向连接即连接已建立，则不需要说明交给谁——直接send()、recv()；无连接则需要说明交给谁、接收谁发的——sendto()、recvfrom()

  3. Telnet：使用TCP连接到特定服务器，并将输入发送给服务端， 将从服务器接收的信息显示在屏幕上

WWW(万维网)

  1. 分布式超媒体 (hypermedia) 系统，是超文本 (hypertext) 系统的扩充

    1. 一个超文本由多个信息源链接成，超文本是万维网的基础
    2. 超媒体与超文本的区别是文档内容不同

  2. HTTP——HyperText Transfer Protocol

    1. 无连接

    2. 基于TCP，可靠交换文件的重要基础

    3. 熟知端口号：80

    5. ① 怎样标识分布在Internet上的万维网文档？ ------URL

      ② 用什么协议实现万维网上各种超链的链接？------HTTP

      ③ 如何存储和表示万维网文档？------HTML

    6. HTTP/1.0每传送一个文件都需要建立一次TCP连接；HTTP/1.1进行了改进；

  3. 网站地址：统一资源定位符 URL

    1. 由以冒号隔开的两大部分组成，并且在 URL 中的字符对大写或小写没有要求
    2. 缺省：
      1. 文件的<路径>项——缺省经常是index.html， default.html etc.
      2. 文件的<端口>项——采用协议默认端口时一般可以省略
    4. Cookie 是网站服务器为用户产生一个唯一的识别码

  4. HTTP报文类型：

    1. 请求报文
    2. 响应报文
    3. HTTP是面向正文的(text-oriented)，报文中的字段都是
      ASCII 码串，因而每个字段的长度都是不确定的

  5. 安全的HTTP协议：HTTPS

    1. 建立在SSL基础上
    2. 熟知端口号为443
    3. 加密的数据传输
文件传输协议FTP(File Transfer protocol)
  1. FTP 提供交互式的访问，允许客户指明文件的类型与格式，并允许文件具有存取权限
  2. FTP 屏蔽了各计算机系统的细节，因而适合于在异构网络中任意计算机之间传送文件
  3. 端口号：
    1. control：21；
    2. data：20
  4. 面向连接：FTP客户与服务器传递FTP命令时，使用的是建立在TCP之上的控制连接
电子邮件

  1. 发邮件

    1. SMTP()

      1. ① 连接建立：连接在发送主机的SMTP客户和接收主机的SMTP
        服务器之间建立，不使用中间邮件服务器

        ② 邮件传送

        ③ 连接释放：邮件发送完毕后，SMTP释放TCP 连接

      2. SMTP支持在邮件服务器间、用户代理及邮件服务器间发送邮件(双向均可)

  2. 收邮件

    1. POP3——Post Office Protocol：收方邮件服务器到收方主机(单向)
    2. IMAP——Internet Message Access Protocol：功能更强大、丰富
域名服务

  1. 提供域名到IP地址转换的服务叫域名服务

  2. 域名：…… . <三级域名>.<二级域名>.<顶级域名>——需要转换为IP地址才可以访问

  3. 域名服务器程序在专设的结点上运行， 运行该程序的机器称为域名服务器

  4. 互联网采用了层次树状结构的命名方法

  5. 权限域名服务器：

  6. 根域名服务器：不管是哪一个本地域名服务器，若要对互联网 上任何一个域名进行解析，只要自己无法解析， 就首先求助于根域名服务器

    1. 根域名服务器并不直接把域名直接转换成 IP 地址。
    2. 在使用迭代查询时，根域名服务器把下一步应当找的顶级域名服务器的 IP 地址告诉本地域名服务器。

  7. 顶级域名服务器

    1. 负责管理在该顶级域名服务器注册的所有二级域名
    2. 当收到 DNS 查询请求时，就给出相应的回答（可能是最后的结果，也可能是下一步应当找的域名服务器的IP地址）

  8. 权限域名服务器

    1. 保存该区中所有主机的域名到IP地址的映射
    2. 当一个权限域名服务器还不能给出最后的查询回答时，就会告诉发出查询请求的DNS客户，下一步应当找哪一个权限域名服务器

  9. 本地域名服务器

    1. 当一个主机发出DNS查询请求时，这个查询请求报文就发送给本地域名服务器

  10. 主机向本地域名服务器的查询一般都是采用递归查询

  11. 本地域名服务器向根域名服务器的查询通常是采用迭代查询

  12. 每个域名服务器都维护一个高速缓存，存放最近用过的名字以及从何处获得名字映射信息的记录

    1. 可大大减轻根域名服务器的负荷
    2. 为保持高速缓存中的内容正确，域名服务器应为每项内容设置计时器，并处理超过合理时间的项
    3. 当权限域名服务器回答一个查询请求时，在响应中都指明绑定有效存在的时间值。增加此时间值可减少网络开销，而减少此时间值可提高域名转换的准确性
简单网络管理协议SNMP
  1. 网络管理包括对硬件、软件和人力的使用、综合与协调，以便对网络资源进行监视、测试、配置、分析、评价和控制， 这样就能以合理的价格满足网络的一些需求，如实时运行性能，服务质量等。
  2. 网络管理并不是指对网络进行行政上的管理

如果本地域名服务器无缓存，当采用递归方法解析另一网络某主机域名时，用户主机、本地域名服务器发送的域名请求消息数分别为一条、一条

在“HTTP协议缺省使用端口80”这句话中，端口80为Web服务器的传输层端口号

HTTP协议的英文全称是Hypertext Transfer Protocol

HTTP协议是无连接、无状态的协议

TCP/IP协议向应用层提供的编程接口是Socket

域名解析DNS使用的传输层协议是UDP，如果一个C语言编写的应用程序基于该传输层协议实现网络通信，则该程序可调用套接字(Socket)编程接口函数sendto向外发送数据

建立TCP连接后，报文段中搭载的HTTP协议报文头部中用于获取文件的命令是GET

运行在不同主机间的两个应用进程AP1和AP2之间能建立多个TCP连接

传输层

传输层协议概述

  1. 传输层又叫运输层

  2. 向应用层提供服务

  3. 功能：连接管理、流量控制、差错控制、拥塞控制、建立无连接和面向连接的通信等

  4. 通信逻辑：进程(‼️用进程标识符来标志)间通信，端到端；可以复用和分用；可靠/不可靠通信服务

  5. 网络环境中一个完整的进程通信标识需要一个五元组来表示：

    协议 本地地址 本地端口号
    远程地址 远程端口号

  6. 主要协议

    1. UDP协议：无连接，用户数据报协议

    2. TCP协议：面向连接，传输控制协议

      UDP和TCP都使用IP协议，即他们的协议数据单元都作为IP数据报的数据

  7. 是自下而上第一个提供端到端服务的层次

  8. 端口：为了使运行不同操作系统的计算机的应用进程能够互相通信，就必须用统一的方法对TCP/IP体系的应用进程进行标志

  9. 常用端口号

    端口号 协议 主要功能
    20 FTP(数据)
    21 FTP(control)
    23 TELNET
    25 SMTP
    53 DNS
    69 TFTP
    80 HTTP
    161 SNMP(agent)
    162 SNMP(management)
    179 BGP
    5060 SIP over TCP or UDP
    5061 SIP using TLS over TCP ; SIPS over TCP
用户数据报协议UDP

  1. 不可靠、无连接；效率更高，但可能会出现丢包、乱序、数据错等问题

  2. 基于UDP的典型协议：RIP、DNS

  3. 面向报文，没有拥塞控制功能，但首部开销小(8个字节)

  4. 数据报格式

    首部 数据报

    首部格式(不包含伪首部——4个字段、8个字节)

    –伪首部– 源端口 目的端口 长度 校验和
    12字节：仅在计算校验和时使用，不实际传输 2字节 2字节 2字节：UDP数据报的长度 2字节：整个UDP数据报的校验和

    伪首部格式

    源IP地址 目的IP地址 0 17 UDP长度
    UDP的协议类型
传输控制协议TCP
  1. 可靠、有连接；处理开销较大，传送数据前要先建立连接；建立的连接只能有两个端点，每一条TCP连接只能是点对点的。
  2. 提供全双工通信
  3. 基于TCP的典型协议：HTTP、FTP
  4. TCP把整个报文看成是一个个字节组成的数据流，每一个字节对应于一个序号
  5. TCP每个报文段首部中的序号字段值表示该报文段数据部分的第一个字节的序号
  6. TCP确认是对接收到数据最高序号表示确认。即表示期望下次收到的数据中第一个数据字节的序号
TCP报文段的首部格式

校验和：整个IP报文的校验和

TCP可靠传输的实现
复位RST 当该字段为1时，表明TCP连接出现严重差错，需释放连接后重新建立连接
同步SYN 该字段为1时，表示这是一个连接请求或连接接收报文
终止FIN 该字段为1时，表示要求释放TCP连接
窗口大小 2字节，用来让对方设置发送窗口的依据，单位为字节
超时重传时间的选择

TCP的可靠传输通过校验和+超时重传实现

  • TCP每发送一个报文段，就对这个报文段设置一个计时器

  • 如果计时器设置的重传时间到，但还没有收到确认，就要重传该报文段

    1. 加权平均往返时间 R T T s RTT_s RTTs​( R T T RTT RTT：往返时间)

      n e w R T T s = ( 1 − α ) ∗ o l d R T T s + α ∗ n e w R T T s a m p l e newRTT_s=(1-\alpha)*oldRTT_s+\alpha*newRTT_{sample} newRTTs​=(1−α)∗oldRTTs​+α∗newRTTsample​

      其中 α \alpha α越小， R T T RTT RTT值更新得越慢

    2. 超时重传时间 R T O RTO RTO

      R T O = R T T s + 4 × R T T D RTO=RTT_s+4\times RTT_D RTO=RTTs​+4×RTTD​

      其中 R T T D RTT_D RTTD​是 R T T RTT RTT的加权平均值

      RFC2988建议这样计算 R T T D RTT_D RTTD​

      1. 第一次测量时， R T T D RTT_D RTTD​值取为测量到的 R T T RTT RTT样本值的一半

      2. 以后的测量中，使用下式计算加权平均的 R T T D RTT_D RTTD​

        n e w R T T D = ( 1 − β ) × o l d R T T D + β × ∣ R T T s − n e w R T T s a m p l e ∣ newRTT_D=(1-\beta)\times oldRTT_D+\beta \times |RTT_s-newRTT_{sample}| newRTTD​=(1−β)×oldRTTD​+β×∣RTTs​−newRTTsample​∣

TCP的流量控制
滑动窗口——实现可靠传输和流量控制

  • TCP基于滑动窗口协议实现可靠传输和流量控制，滑动窗口以字节为单位

  • acknowledge number：在此序号之前的数据已被正确接收

  • 接收方根据ack与对方发来的窗口大小确定发送窗口的大小

  • TCP报头中都携带有窗口大小字段，告知对方自己接收窗口的剩余大小(即可接收的字节数，注意不要忽略仍在传输中的数据)

  • 发送方的发送窗口应不大于对方的接收窗口

  • 如何避免相互等待？

    持续计数器——TCP为每一个连接设有一个持续计数器

  • 如何保证传输效率(控制TCP报文的发送时机)：

    1. 缓存数据达到一定量就发送
    2. 应用进程控制
    3. 定时发送
TCP的拥塞控制
拥塞概念：

在某段时间内，若对网络中某资源的需求超过了该资源所能提供的可用部分，网络性能就要变坏，从而产生拥塞

拥塞产生的条件 ∑ s o u r c e − n e e d e d > s o u r c e − a v a i l a b l e \sum source-needed > source-available ∑source−needed>source−available

注意⚠️：网络拥塞是多种原因引起的，通过简单地增加某种资源数量往往不能消除拥塞

拥塞常常会趋于恶化：TCP重传机制

e.g 一个路由器由于缓存不足丢弃了部分报文，发送端主机将超时重发，导致网络中被注入了更多的报文，从而加剧拥塞。

拥塞控制

防止过多的数据被注入到网络中，使网络中的路由器或链路不致过载。

是全局性的过程

流量控制

点对点通信量的控制——端到端的问题

RFC2581定义的4种拥塞控制方法

  1. 慢启动，又称为慢开始

    开始发送时，如果立即把大量报文注入网络，则可能导致拥塞——不清楚网络的负荷状况——试探性地增加发送窗口

    拥塞窗口 c w n d cwnd cwnd：

    • 由发送方维持，是一个状态变量
    • 取决于网络的拥塞程度，并在动态地变化
    • 发送方让自己的发送窗口等于拥塞窗口，如再考虑到接收方的接受能力，则发送窗口还可能小于拥塞窗口
    慢启动的工作过程
    1. 开始发送报文段时，设置 c w n d cwnd cwnd为1，即设置为一个最大报文段 M S S MSS MSS的数值
    2. 每收到一个对新的报文段的确认后，将拥塞窗口加一，即增加一个 M S S MSS MSS的数值
    3. 传输轮次：使用慢启动时，每经过一个传输轮次，拥塞窗口 c w n d cwnd cwnd就加倍；一个传输轮次所经历的时间其实就是往返时间 R T T RTT RTT——把拥塞窗口 c w n d cwnd cwnd所允许的报文段都发送出去并收到了对已发送的最后一个字节的确认
    4. 慢启动门限 s s t h r e s h ssthresh ssthresh——使用慢启动算法与拥塞避免算法的分界线

  2. 拥塞避免

    思路：每经过一个往返时间 R T T RTT RTT就将发送方的拥塞窗口 c w n d cwnd cwnd加1，而不是加倍——拥塞窗口按线性规律缓慢增长——加法增大

    • 拥塞发生时的处理：

      无论在慢启动阶段还是拥塞避免阶段，只要发送方判断网络出现拥塞，就要把慢启动门限 s s t h r e s h ssthresh ssthresh改为出现拥塞时的发送方窗口值的一半(但不能小于2)——乘法减小

      接着把拥塞窗口重新设置为1，执行慢启动法

  3. 快重传

    思路：如果发送方在超时时间内未收到确认报文，说明网络中发生拥塞，此时发送方应尽早地减小窗口宽度

    • 如果接收方收到一个失序的报文段，就发出重复确认，以便使发送方尽早知道有报文段没有到达接收方
    • 发送方只要接收到三个重复确认就应当立即重传对方尚未收到的报文段

  4. 快恢复

    思路：当发送方收到连续三个重复的确认时，就进行“乘法减小”，即将慢启动门限 s s t h r e s h ssthresh ssthresh减为当前的拥塞窗口宽度的一半

    • 接下来不执行慢启动算法，而是设置为慢启动门限 s s t h r e s h ssthresh ssthresh减半后的数值，然后开始执行拥塞避免算法——“加法增大”
    • 发送方认为当前网络可能没有发生拥塞(仅有拥塞征兆)

  5. 发送窗口的上限值—— min ⁡ [ r w n d , c w n d ] \min[rwnd,cwnd] min[rwnd,cwnd]

TCP的连接管理
三个阶段——“C/S方式”
  1. 连接建立
  2. 数据传送
  3. 连接释放
连接建立——三次握手
  1. 客户机请求连接—— S Y N = 1 ， A C K = 0 SYN=1，ACK=0 SYN=1，ACK=0，选择 s e q = x seq =x seq=x表明传送数据时第一个数据字节的序号
  2. 服务器确认连接请求—— S Y N = 1 ， A C K = 1 SYN=1，ACK=1 SYN=1，ACK=1，确认号 a c k = x + 1 ack=x+1 ack=x+1，自己选择序号 s e q = y seq=y seq=y
  3. 客户机收到后，给出确认—— S Y N = 0 , A C K = 1 SYN=0,ACK=1 SYN=0,ACK=1，确认号 a c k = y + 1 ack=y+1 ack=y+1

为什么是三次握手？

  • 防止“失效的连接请求”占用服务器端资源

三次握手带来的安全问题及解决办法？

  • TCP-SYN flooding——不停发出连接请求，但不对SYN、ACK报文做出响应，占用服务器内部数据缓存
连接释放——可由任意方发起
  1. A主动关闭连接—— F I N = 1 , s e q = u FIN=1,seq=u FIN=1,seq=u
  2. B接收后发出确认—— A C K = 1 , a c k = u + 1 , s e q = v ACK=1,ack=u+1,seq=v ACK=1,ack=u+1,seq=v
  3. A—>B方向的连接被释放，连接半关闭，但B若发送数据，A仍要接收
  4. B发送完毕—— F I N = 1 , A C K = 1 , s e q = w , a c k = u + 1 FIN=1,ACK=1,seq=w,ack=u+1 FIN=1,ACK=1,seq=w,ack=u+1
  5. A接收后发出确认—— A C K = 1 , a c k = w + 1 , s e q = u + 1 ACK=1,ack=w+1,seq=u+1 ACK=1,ack=w+1,seq=u+1
  • 关于MSL：Maximum Segment Lifetime——报文段最大存活时间
  • 关闭连接前等待2MSL时间

主机甲向主机乙发送一个（SYN=1，seq=11220） 的TCP段，期望与主机乙建立TCP连接，若主机乙接受该连接请求，则主机乙向主机甲发送的正确TCP段可能是中SYN=1，ACK=1，ack=11221，seq=任意值

一个TCP连接总是以1KB的最大段发送 TCP段，发送方有足够多的数据要发送。 当拥塞窗口为16KB时发生了超时，如果接下来的4个RTT（往返时间）时间内的TCP段的传输都是成功的，那么当第4个RTT时间内发送的所有TCP段都得到肯定应答时，拥塞窗口大小是9KB

Internet中某主机A上的浏览器使用HTTP协议从Web服务器B下载一个长度为10MB的文件。题图以表格形式给出了A与B之间从通信开始后传输的TCP报文段信息，表格中每一行对应一个报文段，报文段按传输时间先后顺序编号为 S 1 − S 14 S_1-S_{14} S1​−S14​，数据长度栏目表示报文段所搭载的应用数据长度。表格中的数值均为10进制，标注为’X’的表示该字段值未知，已知A、B间建立TCP连接的过程中通过选项字段协商确定最大报文段长度MSS=1000字节，双方均按照慢启动(开始)和拥塞避免机制进行传输，慢启动门限 s s t h r e s h = 4 ssthresh=4 ssthresh=4，单位：MSS，传输过程中没有报文段超时

编号 传输方向 序号 确认号 ACK SYN 窗口
S 1 S_1 S1​ A → B A\rightarrow B A→B 0 0 X X 6500
S 2 S_2 S2​ B → A B\rightarrow A B→A 0 1 X X 16384
S 3 S_3 S3​ A → B A\rightarrow B A→B 1 1 X X 6500
S 4 S_4 S4​ A → B A\rightarrow B A→B 1 1 1 0 6500
S 5 S_5 S5​ B → A B\rightarrow A B→A 1 382 1 0 16384
S 6 S_6 S6​ A → B A\rightarrow B A→B 382 1001 1 0 5500
S 7 S_7 S7​ B → A B\rightarrow A B→A 1001 382 1 0 16384
S 8 S_8 S8​ B → A B\rightarrow A B→A 2001 382 1 0 16384
S 9 S_9 S9​ A → B A\rightarrow B A→B 382 3001 1 0 3500
S 10 S_{10} S10​ B → A B\rightarrow A B→A 3001 382 1 0 16384
S 11 S_{11} S11​ B → A B\rightarrow A B→A 4001 382 1 0 16384
S 12 S_{12} S12​ B → A B\rightarrow A B→A 5001 382 1 0 16384
S 13 S_{13} S13​ B → A B\rightarrow A B→A 6001 382 1 0 16384
S 14 S_{14} S14​ A → B A\rightarrow B A→B 382 X 1 0 6000
  1. 已知报文段 S 1 , S 2 , S 3 S_1,S_2,S_3 S1​,S2​,S3​是A、B间建立TCP连接的报文段，请分别给出这三个报文段中SYN和ACK两个字段的值
  2. 报文段 S 4 S_4 S4​中搭载的HTTP协议报文头部中的方法或命令是什么？
  3. 请给出报文段 S 8 S_8 S8​和 S 13 S_{13} S13​中搭载的数据长度和报文段 S 14 S_{14} S14​中搭载的确认号字段
  4. 假设B在收到 S 14 S_{14} S14​后，直到收到A的下一个确认之前，最多可向A发送n个字节的应用数据。如果B在报文段 S 14 S_{14} S14​之后仍然采用慢启动机制，n的值是多少？如果B在报文段 S 14 S_{14} S14​之后改用拥塞避免机制，n的值是多少？

解析：

  1. 序号 SYN ACK
    S 1 S_1 S1​ 1 0
    S 2 S_2 S2​ 1 1
    S 3 S_3 S3​ 0 1

    原因：SYN字段值表示正在请求建立连接/同意建立连接请求，ACK字段在连接建立后直到连接断开之前恒为1

  2. S 4 S_4 S4​开始向Web服务器请求发送文件，方法：GET

  3. 根据确认号推知， S 8 S_8 S8​搭载的数据长度为1000字节，在 S 13 S_{13} S13​所处的发送轮次中，由于A给出了接收窗口的最大值为3500字节，故而B在未收到A的确认信息之前，最多能向A传送3500字节—— S 13 S_{13} S13​搭载的数据长度为500，传输过程中没有报文段超时，因此A在 S 14 S_{14} S14​给出的确认号为A接下来可以接受的最小序号值，即6001+500=6501

  4. 分析：

    • 最初B的发送窗口值为1(慢启动机制)，第一轮次结束后(收到 S 6 S_6 S6​确认报文) c w n d cwnd cwnd加倍，此时的 r w n d rwnd rwnd为5.5，发送窗口值为min[ c w n d , r w n d cwnd,rwnd cwnd,rwnd]为2，接着开始第二轮传输，第二轮次结束后(收到 S 9 S_9 S9​确认报文) c w n d cwnd cwnd加倍，为4，但此时的 r w n d rwnd rwnd为3.5，发送窗口值为min[ c w n d , r w n d cwnd,rwnd cwnd,rwnd]为3.5
    • 注意，这里只是改变了发送窗口搭载的最大数据长度，并没有改变 c w n d = 4 = s s t h r e s h cwnd=4=ssthresh cwnd=4=ssthresh
    • 接下来接收到的确认报文 r w n d = 6 rwnd=6 rwnd=6
      • 若继续使用慢启动机制，则 c w n d = 2 ∗ 4 = 8 cwnd=2*4=8 cwnd=2∗4=8，能发送的最大数据长度为 M S S ∗ m i n [ c w n d , r w n d ] = 6000 MSS*min[cwnd,rwnd]=6000 MSS∗min[cwnd,rwnd]=6000；
      • 若改用拥塞避免机制，则 c w n d = 4 + 1 = 5 cwnd=4+1=5 cwnd=4+1=5，能发送的最大数据长度为 M S S ∗ m i n [ c w n d , r w n d ] = 5000 MSS*min[cwnd,rwnd]=5000 MSS∗min[cwnd,rwnd]=5000

网络层

网络层模型
  • 网络层是通信子网的最高层，对上层用户屏蔽了子网通信的细节，如子网类型、拓扑结构、子网数目，对上层提供一致的服务、统一的地址
    • 实现端到端的网络连接，屏蔽不同子网技术的差异，向上层提供一致的服务
    • 主要功能：
      1. 路由选择和转发
      2. 分组交换
      3. 屏蔽子网的差异，实现统一的网络编地址
    • 主要采用无连接方式、分组交换方式(IP传输方式)
  • 网络层提供的两种服务
    • 电信虚电路：面向连接的服务——通信双方之间的所有分组传输都是通过同一条虚电路传送
    • Internet数据报：无连接的服务——通信双方的多次通信可以沿着相同/不同的路径传输
    • TCP/IP采用数据报服务
网际协议IP

  • 网际协议IP是TCP/IP体系中两个最主要的协议之一

    • 与IP协议配套使用的四个协议

      1. 地址解析协议ARP
      2. 逆地址解析协议RARP
      3. 网际控制报文协议ICMP
      4. 网际组管理报文协议IGMP

  • 分类的IP地址

    • IP地址：由ICNN分配给主机或路由器的标识符——IPv4为32位IP地址
    • 编址方法：
      1. 分类的IP地址
      2. 子网划分
      3. 构成超网
    • I P   a d d r e s s : : = = < n e t − i d > , < h o s t − i d > IP\ address::=={,} IP address::==<net−id>,<host−id>
    • IP地址的表示方法：点分十进制记法
    • 全0、全1的IP地址有特殊含义
      • 全0表示本网络或本主机
      • 全1表示广播地址
    • IP地址与硬件地址
      • IP地址：网络层及以上各层使用的地址，是一种逻辑地址，存放在IP包头部
      • 物理地址：数据链路层以及物理层使用的地址，存放在数据链路层的帧中(帧中也有IP地址，不过在帧的数据部)
      • [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-pDguUpgy-1638973441536)(/Users/cleopatra/Library/Application Support/typora-user-images/image-20211109194442371.png)]

  • ARP与RARP协议

    • ARP将IP地址转化为物理地址——解决同一局域网中的主机或路由器的IP地址和硬件地址的映射

      • 主机设有一个ARP高速缓存，存有本地局域网上各主机和路由器的IP地址与硬件地址映射表

      • 当主机欲向本局域网内上的主机发送IP包时，

        先查看高速缓存===>如有，则查出其对应的硬件地址，再将此硬件地址写入MAC帧===>如无，则发送ARP请求：

      1. 主机A广播发送ARP请求分组
      2. 目标主机收到ARP请求帧后以单播形式发送ARP响应分组

      • 如果目标主机不在本局域网内，IP包需经由路由器转发

        —此时在局域网内要完成的是路由器IP与物理地址的映射

    • RARP协议将物理地址转换为IP地址

IP数据报格式
组成：头部+数据
  • 头部：20字节的固定字段+0到多个可选字段
  • 重要字段：
    • Version：4bit，版本
    • IHL：4bit，IP包头长度，单位为word(32bit)
    • Type of service：1 byte，服务类型
    • Total length：2 bytes，IP包总长度，单位为字节——IP包的最大长度为65535字节
    • Identification：2 bytes，标识
    • DF：1bit，Don’t Fragment
    • MF：1bit，More Fragment
    • Fragment offset：13 bit，片偏移，以8字节为单位
  • Time to Live (TTL)：1byte，生存时间，IP包在网络中可通过路由器个数的最大值——Hop(每经过一个路由器俗称为1跳)
划分子网和构造超网
  • 划分子网
    • 分类IP地址的缺点：
      • IP地址空间的利用率有时很低
      • 给每一个物理网络分配一个网络号会使路由遍变得太大而使网络性能变坏
      • 两级的IP地址不够灵活

    ——增加子网字段，形成三级ip地址：从主机号借用若干位作为子网号

    I P   a d d r e s s : : = < n e t − i d > , < s u b n e t − i d > , < h o s t − i d > IP \ address ::={,,} IP address::=<net−id>,<subnet−id>,<host−id>

    • 子网掩码对目的IP地址和子网掩码执行“按位与”操作，即得到子网(网络)地址
    • 子网掩码是一个网络或一个子网的重要属性
  • 构造超网
    • 无分类编址CIDR
      • 消除传统分类IP地址以及划分子网的概念
      • 使用各种长度的网络前缀来代替分类地址中的网络号和子网号
      • IP地址从三级编址又回到了两级编址
      • I P   a d d r e s s : : = < p r e f i x > , < h o s t − i d > IP \ address::={,} IP address::=<prefix>,<host−id>
      • 斜线记法，又称为CIDR记法——IP地址后加一个斜线“/”后面跟网络前缀所占的位数
      • 网络前缀都相同的连续IP地址组成“CIDR地址块”
      • CIDR带来的好处
        1. 路由聚合==构成超网
        2. 减少路由表项
      • 最长前缀匹配——网络前缀越长，其地址块就越小，因而路由就越具体(more specific)
    • 在计算子网内能分配的最大地址个数时，要注意主机号全0与全1的特殊性
网际控制报文协议ICMP
  • Internet Control Message Protocol
  • 报文共有9种，分为差错报告报文和询问报文两类
    • 差错报文
      • Destination unreachable(终点不可达)——packet cannot be delivered路由器或主机无法传输报文时
      • Time exceeded(超时)——TTL hits 0
      • Parameter problem——Invalid header field
      • Source quench(源点抑制)——Choke packet路由器或主机由于拥塞丢弃报文时，向源主机发送此报文
      • Redirect(重定向)——teach a router about geography路由改变
    • 询问报文
      • Echo request——Ask a machine if it is alive
      • Echo reply——Yes,I’m alive
      • Timestamp request——Same as Echo request,but with timestamp
      • Timestamp request——Same as Echo reply,but with timestamp
  • 应用举例
    • Ping——用于测试主机之间的连通性
      • ICMP Echo request/reply
    • Traceroute/Trancert——用于测试到另一台主机所经过的路由信息
      • ICMP 超时报告报文——TTL字段分别设置为1，2，3，…，直到到达目的主机(UDP报文)
路由算法及协议

  • 路由算法用于生成路由信息(路由表)

  • 静态路由与动态路由

    • 静态路由选择策略：非自适应路由选择；简单、开销小，不能及时适应网络状态的变化；适用于小规模变化较少的网络，由人工设置路由。
    • 动态路由选择策略：自适应路由选择；能较好地适应网络状态的变化，但实现起来较为复杂，开销也比较大；适用于较大规模，频繁变化的网络，通过专门的算法和协议进行路由计算。

  • 自制系统AS(Autonomous Systom):在单一的技术管理下的一组路由器，而这些路由器使用一种AS内部的路由选择协议和共同的度量以确定分组在该AS内的路由，同时还使用一种AS之间的路由选择协议用以确定分组在AS之间的路由

    • 外部网关协议：自制系统之间的路由选择——EGP
      • e.g BGP
        1. BGP难以找到最佳路由，只能寻找一条能够到达目的网络且比较好的路由(不能兜圈子)
        2. BGP发言人：
          1. 两个BGP发言人通过一个共享网络连接在一起
          2. 一般是AS的边界路由器，也可以不是
          3. BGP发言人与其他AS中的BGP发言人交换路由信息
          4. 路由信息的交换通过TCP协议进行，两个发言人在TCP连接上交换BGP报文以建立BGP会话
          5. 发言人除了运行BGP协议外，还要运行AS内部网关路由协议
        3. BGP-4使用的四种报文：
          1. OPEN报文：建立关系
          2. UPDATE报文：发送某一路由信息；列出要撤销的多条路由
          3. KEEPALIVE报文：周期性证实邻站关系
          4. NOTIFICATION报文：用于发送检测到的差错
    • 内部网关协议：自治系统内部的路由选择——IGP
      • e.g RIP；OSPF

  • 典型的动态路由算法

    • 距离向量路由算法

      • RIP协议：

        -每个路由器维护一张表，表中给出了到每个目的地的已知最佳距离和线路，并通过与相邻路由器交换距离信息来更新表

        -路由器周期性地向所有相邻路由器发送他的距离表，同时他也接收每个邻居节点发来的距离表

        -根据不同的邻居发来的信息，计算到目标路由器的最小距离，更新本路由的路由表

      • 算法缺陷：对好消息反应迅速，对坏消息反应迟钝

        1. 网络出现故障时，要经过比较长的时间才能将此信息传送到所有的路由器
        2. 支持的网络规模有限
        3. 路由器间交换的路由信息是路由器中的完整路由表，随网络规模的扩大，开销随之增大

      • 距离定义：路由器跳数 hop count

      • 最长距离——15跳，跳数为16表示不可达

      • 要点

        1. 仅和相邻路由器交换信息
        2. 交换的信息是当前路由器所知道的全部信息
        3. 按固定的时间间隔交换路由信息
    • 链路状态路由算法——构造全网拓扑结构图

      • 基本思想

        1. 发现邻居结点，学习其网络地址
        2. 测量到各邻居结点的延迟或开销
        3. 构造一个分组，其中包含所有它刚刚知道的信息
        4. 将这个分组发送给其他所有路由器
        5. 计算出到每一个其他路由器的最短路径

      • OSPF协议

        -收敛速度快：链路状态发生变化时，结点会以洪泛方式告知网络中所有其他结点

        -适用于大规模网络：仅在链路状态发生变化时发送洪泛信息，不会产生很大通信量

        **OSPF直接用IP数据报传送

        OSPF的5种分组
        1. Hello分组
        2. Database Description分组
        3. Link State Request分组
        4. Link State Update分组：使用洪泛法对全网更新链路状态
        5. Link State Acknowledge分组
路由器
  • 组成
    1. 路由选择：按照路由选择协议工作，构建路由表
    2. 分组转发：交换结构
  • 功能
    1. 运行路由协议，设置路由表
    2. 检测到拥塞时，合理丢弃IP分组
    3. 根据收到的IP分组的目的IP地址，将其转发到合适的输出线路上
IP组播
  • 又称为多播，用于实现一点对多点的数据传输
  • 组播的典型应用实例：网络视频服务
  • 主机通过IGMP协议与组播路由器通信，加入/退出某个组播组
虚拟专用网VPN和网络地址转换NAT
  • 网络地址转换NAT
    • 专用地址
      1. 10.0.0.0～10.255.255.255
      2. 172.16.0.0～172.31.255.255
      3. 192.168.0.0～192.168.255.255
    • 当内部网络使用专用地址时，与Internet的通信需要通过NAT(Network Address Translation)
    • NAT路由器内部使用TCP/UDP端口号实现外网数据包向内网地址的转换
  • 虚拟专用网VPN——virtual private network
    • 多个企业/机构内部网络之间互连的实现方法：
      • 租用专用线路
      • 基于公用网络
    • VPN涉及的技术
      • 隧道
      • 加密
      • 身份认证
    • 基于Internet建立VPN的两种情形
      • 内部网络通过Internet互连
      • 远程用户访问内部网
    • 典型VPN实现技术
      • IPsec：ESP隧道模式
      • SSL：WEB浏览器内置SSL支持

某网络的IP地址空间为192.168.5.0/24，采用长子网划分，子网掩码为255.255.255.248，则该网络的最大子网个数为32，每个子网内的最大可分配地址个数为6

在子网192.168.4.0/30中，能接受目的地址为192.168.4.3的IP分组的最大主机数是2，ip地址分别是：192.168.4.1/30；192.168.4.2/30(CIDR记法)

若路由器R因为拥塞丢弃IP分组，则此时R可向发出该IP分组的源主机发送的ICMP报文的类型是源点抑制报文

某自治系统采用RIP协议，若该自治系统内的路由器 R 1 R_{1} R1​收到其邻居路由器 R 2 R_{2} R2​的距离矢量中包含的信息 < n e t 1 , 16 > <net1,16>，则可能得出的结论是 R 1 R_{1} R1​不能经过 R 2 R_{2} R2​到达 n e t 1 net1 net1

数据链路层

概述

  • 物理层实现了比特流的传输，数据链路层在其基础上实现帧的传输——数据链路层传输的协议数据单元(PDU)是帧

  • 数据链路层使用的信道类型：

    • 点对点信道
    • 广播信道：必须采用专门的共享信道协议来协调数据发送

  • 数据链路层涉及的问题

    1. 成帧：帧边界的可识别性

      • 字符计数法
      • 字符填充的首尾定界法
      • 比特填充的首尾定界法
      • 物理编码违例法

    2. 差错控制

      • 错误检测和纠正
      • 检错编码： 误 码 率 = 出 错 的 比 特 数 传 送 的 总 比 特 数 误码率=\frac{出错的比特数}{传送的总比特数} 误码率=传送的总比特数出错的比特数​
      • 处理方法
        1. 使用可检测并纠正错误的编码：纠错码
        2. 使用可检测错误的编码+重传：检错码
      • 检错编码：奇偶校验、简单累加和、循环冗余校验CRC
      • 纠错编码：海明码

      通过检错码/纠错码可以做到帧的无差错接收，但并不意味着可靠传输，其他的错误包括帧丢失、帧重复、帧先序

    3. 流量控制及可靠传输

    4. 广播信道中的介质访问控制

  • 基本数据链路协议

    • 无限制的单工协议

      1. 单向传输
      2. 理想信道
      3. 发送方总有数据发送
      4. 接收方总能及时处理所收到的数据

    • 单工停-等协议(比无限制的单工协议增加了流量控制机制)

      1. 接收方每收到一帧，都向发送方返回一个应答帧
      2. 发送方每发送一帧，都等待来自接收方的应答帧，之后才发送下一帧

    • 有噪声信道的单工协议

      1. 解决方案——ARQ协议
        • 校验和：检测帧是否出错
        • 确认帧
        • 超时重发
        • 帧序号：保证接收方不会重复接收帧
      2. 考虑的情形
        • 帧被正确接收
        • 数据帧出错或丢失
        • 确认帧出错或丢失

    • 滑动窗口协议

      • 允许发送方连续发送多个帧
      • 通过滑动窗口实现流量控制
      • 发送方：发送窗口内的序号代表允许它发送的帧
      • 接收方：接收窗口内的序号代表它可以接收的帧

      连续发送的多个帧中，某一个帧出错或丢失，但后续帧已被正确接收，如何处理？——数据链路层需按顺序向网络层上交帧

      • 后退N帧的滑动窗口协议
        1. 某帧出错，则该帧之后的帧全部丢弃，从出错帧开始重新发送
      • 选择性重传的滑动窗口协议
        1. 某帧出错，选择性地重发该帧，该帧之后发送的帧由接收方数据链路层缓冲，收到重发的帧后上交网络层
      • 注意⚠️： A C K n 表 示 n 及 n 以 前 的 帧 均 已 被 正 确 接 收 ACK_n表示n及n以前的帧均已被正确接收 ACKn​表示n及n以前的帧均已被正确接收
    点对点协议PPP

    • 应用：拨号上网、光纤传输

    • 组成

      1. 将IP数据报封装到串行链路的方法
      2. 链路控制协议LCP(Link Control Protocol)
      3. 网络控制协议NCP(Network Control protocol)

    • 帧格式：面向字节，所有PPP帧的长度都是整数字节

    • 透明传输问题

      • 同步传输
        • 零比特填充：发送端只要发现5个连续1，则立即填入一个0；接收端对帧中的比特流进行扫描，每当发现5个连续1时就把这5个连续1后面的1个0删除
      • 异步传输：字符填充

    • 身份认证协议

      • PAP——Password
      • CHAP——Challenge-Handshake
    介质访问控制

    1. 静态划分信道

      • 频分复用
      • 时分复用
      • 波分复用
      • 码分复用

    2. 动态介质访问控制(多点控制)

      • 随机访问：可能产生碰撞、冲突

        -典型协议：ALOHA、CSMA、CSMA/CD、CSMA/CA

      • 受控访问：

        -多点线路探询(polling)、轮询(局域网中使用较少)

    3. 以太网的核心——CSMA/CD
      • 载波监听多点访问/碰撞检测
      • 随机访问协议

      核心概念：

      1. 载波监听

        结点在发送之前先检测总线上是否有其他结点正在发送数据

      2. 碰撞检测

        结点边发送数据边检测信道上是否发生了碰撞

        由于线路的传播时延，单纯的载波监听并不难完全避免碰撞

        发生碰撞时，两个或更多的信号在总线上相互叠加，导致无法识别

      3. 碰撞强化

        发送方检测到碰撞后，立即停止发送，并发送32或48bit的人为干扰信号，以便让所有用户知道发生了碰撞

      4. 碰撞退避

        • 碰撞后，结点等待一段时间，重新开始载波检测和发送操作
        • 为避免退避后再次碰撞，冲突各方的等待时间应各不相同
        • 以太网采用截断二进制指数退避算法
          1. 退避时间： T = 2 τ × 倍 数 T=2\tau\times倍数 T=2τ×倍数
          2. 倍数：在0，1，……， 2 k − 1 2^{k}-1 2k−1中取随机数， k = m i n { 重 传 次 数 ， 10 } k=min\{重传次数，10\} k=min{重传次数，10}
          3. 重传次数超过16后，丢弃该帧，并向上层报告

      5. 争用期：

        • 一个站点开始发送数据后，最多经过 2 τ 2\tau 2τ就可知道是否发生了碰撞
        • 以太网的端到端往返时延 2 τ 2\tau 2τ称为争用期，或碰撞窗口
        • 如果经过争用期还没有检测到碰撞，就可以肯定这次发送不会发生碰撞

      优缺点讨论

      • 网络负载较轻时效率高
      • 硬软件实现简单、灵活
      • 网络负载较重时，碰撞发生概率增大，网络效率较低
      • 由于存在多次冲突的可能，数据从发送方到达接收方的时间没有保证——无法在发送时确定数据传输时间

    4. 局域网技术标准

      • IEEE802标准将局域网的数据链路层分为两个子层
        1. LLC(Logic Link Control)逻辑链路控制子层
      1. MAC(Media Access Control)介质访问控制子层
      • IEEE802.2:逻辑链路控制子层LLC
    • IEEE802.3:CSMA/CD介质访问控制与物理层技术规范
      • IEEE802.11:无线局域网介质访问控制与物理层技术规范
    1. 以太网的MAC层

      • 以太网采用CSMA/CD介质访问控制协议

        1. 结点发送数据时，以太网总线结构，总线上的所有结点都能收到帧
        2. 按照IEEE803.2标准，给每个站点分配唯一的MAC地址
        3. MAC地址为48bit，高24bit为厂商识别符，低24位由厂商自行分配，需保证每个网络接口具有全球唯一的MAC地址

      • 适配器每收到一个帧就检查帧中的目的MAC地址，如果是发往本站的帧则进行处理，否则丢弃

        1. 单播
        2. 组播/多播
        3. 广播

      • 以太网的帧格式

      • 以太网采用曼彻斯特编码，每个比特均有电平跳变，无电平跳变则意味着总线空闲

      • 高速以太网若工作在全双工模式下则不使用CSMA/CD协议——不存在争用

      • 特殊字符表示

        10BASE- T 10：10Mbps，BASE：基带传输，T：双绞线
        100BASE- TX 2对UTP5类线或屏蔽双绞线
        FX 一对光纤
        T4 4对UTP三类线或五类线
        1000BASE- X 基于光纤
        SX 短波长
        LX 长波长
        CX 铜线
        T 4对五类双绞线UTP
        万兆以太网 – 只使用光纤
局域网互连
在物理层扩展局域网
  • 使用中继器或集线器可以实现局域网在物理层的互联
  • 集线器与中继器都不分割碰撞域
    • 优点：实现网络扩展较方便，成本低
    • 缺点碰撞域增大，碰撞发生概率增大，可能影响网络性能
在数据链路层扩展局域网
  • 使用网桥可以实现局域网在数据链路层的互联——网桥工作在数据链路层
    • 基本工作原理
      • 根据MAC帧的目的地址对收到的帧进行转发
      • 具有过滤帧的功能，当收到一个帧时，确定该帧的目的MAC地址，确定将该帧转发到哪个接口——并不向所有接口转发帧
    • 网桥的优点
      • 过滤通信量，增加吞吐量——各网段是独立的碰撞域
      • 扩大了物理范围
      • 提高了可靠性
      • 可互联不同物理层、不同MAC子层和不同速率的局域网（这可是桥诶！不同物理层怎么了，物理层的质对于网桥是透明的，不在桥的考虑范围内）
    • 网桥的局限性
      • 存储转发增加了时延
      • 在MAC子层并没有流量控制功能
      • 只适合用户数不太多(不超过几百个)和通信量不大的局域网
        • 广播风暴：某些站点频繁发送广播帧产生网络拥塞
  • 改进网桥？——多接口网桥，交换机
    • 交换机工作在数据链路层，每个接口为一个网段(碰撞域)，可以大幅提高网络性能
    • 集线器由所有接口共享传输介质的带宽，而交换机为每个接口独享带宽
    • 交换机按照自学习算法建立转发表——根据接收到帧的源MAC地址以及收到帧的接口建立转发表
    • 透明网桥还使用生成树算法：避免帧无休止转发
    • 以太网交换机：
      • 交换机收到一个帧后的处理过程
        1. 首先进行自学习，检查帧中源地址在交换表中是否存在，如不存在，则在交换表添加一项，记下源地址和进入交换机的接口
        2. 然后转发帧，根据收到的帧中的目的地址在交换表中查找
          1. 如果找到，则对应的接口即为转发接口
          2. 如果未找到，则向除进入接口外的所有其他接口转发
  • 虚拟局域网VLAN
    • 在现有局域网基础上，通过将网络站点分组，构成若干逻辑上独立的虚拟局域网
    • 用途
      • 便于管理
      • 控制广播风暴
      • 安全性
    • 帧不会在两个VLAN之间自动转发，包括广播帧
    • IEEE802.1Q在以太网帧中扩展VLAN标记(tag)，供交换机识别和转发

数据链路层采用后退N帧(GBN)协议，发送方已经发送了编号0-1的帧，当计时器超时时，若发送方只收到0，2，3号帧的确认，则发送方需要重发的帧数是4： A C K n ACK_{n} ACKn​代表n号帧及n号帧之前的帧都已被正确接收

某局域网采用CSMA/CD协议实现介质访问控制，数据传输率为 100 M b / s 100Mb/s 100Mb/s，主机甲与主机乙的距离为 2 k m 2km 2km，信号传播速度是 200000 k m / s 200000km/s 200000km/s请回答以下问题，并给出计算过程：

(1) 若主机甲和主机乙发送数据时发生冲突，则从开始发送数据时刻起，到两台主机均检测到冲突时刻为止，最短经过多长时间？最长经过多长时间？(假设主机甲和主机已发送数据时，其它主机不发送数据)

解析：

甲乙间单向传输时延 τ = 2 / 200000 = 10 μ s \tau=2/200000=10\mu s τ=2/200000=10μs

最短：同时发送，中点处发生冲突，继而开始传送冲突信号——10 μ s \mu s μs

最长：甲发送的帧已经走过整段距离后，乙开始发送数据，此时冲突信号需传输整段到甲—— 2 ∗ 10 μ s 2*10\mu s 2∗10μs

在一个采用CSMA/CD协议的网络中，传输介质是一根完整的电缆，传播速率为 1 G b p s 1Gbps 1Gbps，电缆中的信号传播速度是 200000 k m / s 200000km/s 200000km/s。若最小数据帧长度减少 800 b i t 800bit 800bit，则最远的两个站点之间的距离至少需要

  • 传输时延>2 τ \tau τ,保证了在远端站点发送完数据之前能够检测到冲突
  • 传输时延=数据包的大小/数据包的发送速率
  • 传播时延= τ = L / v \tau=L/v τ=L/v

设 C S M A / C D CSMA/CD CSMA/CD局域网的数据传输速率为 1 G b p s 1Gbps 1Gbps,信号传播速度为 200000 k m / s 200000km/s 200000km/s，最小帧长度为 25000 b i t 25000bit 25000bit，则该局域网中两站之间的最远距离为？

传 输 时 延 = T = 25000 b i t / 1 G b p s = 1.5 × 1 0 − 5 s 传输时延=T=25000bit/1Gbps=1.5\times 10^{-5}s 传输时延=T=25000bit/1Gbps=1.5×10−5s

传 播 时 延 = τ = L / V = L / 200000 k m / s < T / 2 传播时延=\tau=L/V=L/200000km/s传播时延=τ=L/V=L/200000km/s<T/2

最 远 距 离 L = V × τ = 200000 × 1.5 × 1 0 − 5 × 1 / 2 = 1.5 k m 最远距离L=V\times \tau=200000\times 1.5\times 10^{-5}\times 1/2=1.5km 最远距离L=V×τ=200000×1.5×10−5×1/2=1.5km

物理层

基本概念
  • 主要任务：传输比特流
  • 四个特性：
    1. 机械特性
    2. 电气特性
    3. 功能特性
    4. 过程特性
  • 数据通信的基础知识
    • 信道：向某一方向传送信息的介质
    • 信号是数据的电气或电磁的表现。信号分为模拟信号和数字信号两大类
    • 码元速率：单位时间内通过信道的码元个数，单位波特，又称波特率
    • 数据速率：单位时间内通过信道的信息量，比特数，单位b/s或bps
    • 我们希望一个码元携带尽可能多的比特，以提高信道的数据速率
    • 通信双方的交互方式
      • 单向：单工
      • 双向交替：半双工
      • 双向同时：全双工
    • 基带信号和带通信号
    • 信道的极限容量：
      • N y q u i s t 定 理 ： 理 想 低 通 信 号 最 大 数 据 传 输 率 = 2 H l o g 2 V b p s Nyquist定理：理想低通信号最大数据传输率=2Hlog_{2}{V}bps Nyquist定理：理想低通信号最大数据传输率=2Hlog2​Vbps
      • H:信道带宽，V:信号电平的级数(信号的状态数)
      • “码间串扰”
    • 信噪比： 10 l o g 10 S / N 10log_{10}{S/N} 10log10​S/N
      • S h a n n o n 公 式 ： 信 道 的 极 限 信 息 传 输 速 率 C = W l o g 2 ( 1 + S / N ) b / s Shannon公式：信道的极限信息传输速率C=Wlog_{2}(1+S/N)b/s Shannon公式：信道的极限信息传输速率C=Wlog2​(1+S/N)b/s
      • W:信道带宽(Hz)
      • S:信道内所传信号的平均功率
      • N:信道内部的高斯噪声功率
  • 物理层下面的传输介质
    • 传输介质：数据传输系统中发送器和接收器之间的物理通路
    • 传输媒体分为两大类
      • 导引型传输介质
        • 双绞线(Twist pair)
          • 屏蔽双绞线STP
          • 无屏蔽双绞线UTP
        • 同轴电缆(Coaxial cable)
        • 光纤(Fiber optics)
      • 非导引型传输介质——可传播无线电波的自由空间
        • 短波通信
        • 微波通信及卫星通信
        • 红外通信
        • 激光通信
  • 信道复用技术
    • 频分多路复用FDM：Frequency Division Multiplexing
    • 时分多路复用TDM：Time Division Multiplexing
    • 波分复用——光纤通信(光的频分复用)WDM：Wavelength Division Multiplexing
    • 码分复用——抗干扰能力强CDM：Code Division Multiplexing
  • 数字传输系统

    • 脉码调制系统 PCM(pulse code modulation)——用于电话交换系统，在数字传输系统中进行多路话音的变换与传输

    • 同步光纤网 SONET和同步数字系列 SDH——主要用于高速干线传输，特别是光纤传输

  • 宽带接入技术

    • xHDL技术——基于电话线

    • HFC——基于有线电视线(光纤+同轴电缆)

    • FTTx——基于光纤

      • FTTH：光纤到户
      • FTTB：光纤到大楼
      • FTTC：光纤到路边

      目前用于光纤到户的技术：

      • 无 源 光 网 络 P O N — — P a s s i v e O p t i c a l N e t w o r k 无源光网络PON——Passive Optical Network 无源光网络PON——PassiveOpticalNetwork
      • 运营维护成本低；上下行使用波分复用
      • EPON
      • GPON

宽带接入技术FTTH使用的传输介质是：光纤

网络链路的波特率是指该链路的每秒传输的波形(码元)数

基本的信道复用技术有频分复用和时分复用，光纤传输常用的波分复用实际上是光的频分复用，无线局域网WLAN则使用了一种与前述几种信道复用技术不同的复用方法，即正交频分复用

总结

  1. 计算机网络：互相相连、自治的计算机的集合
  2. 网络的功能：连通性、资源共享
计算机网络的性能

  • 性能指标

    • 速率

      -传送数据的速率，即数据速率(data rate)或比特率(bit rate)

      -单位：b/s，也写为bps……

    • 带宽

      -原本指某个信号具有的频带宽度

      -计算机网络中，指通信线路传送数据的能力——最高数据率

    • 吞吐量

      -单位时间内通过网络的数据量

    • 时延

      1. 发送时延： 数 据 块 长 度 发 送 速 率 \frac{数据块长度}{发送速率} 发送速率数据块长度​
      2. 传播时延： 信 道 长 度 电 磁 波 在 信 道 上 的 传 播 速 率 \frac{信道长度}{电磁波在信道上的传播速率} 电磁波在信道上的传播速率信道长度​
      3. 处理时延
      4. 排队时延

    • 时延带宽积

      顾名思义——传播时延*带宽

    • 往返时间 R T T RTT RTT

    • 利用率

  • 非性能指标

    • 费用
    • 质量
    • 标准化
    • 可靠性
    • 可扩展性和可升级性
    • 易于管理和维护
OSI体系结构、TCP/IP体系结构、五层体系结构
OSI体系结构 TCP/IP体系结构 五层体系结构
应用层 应用层 应用层
表示层 应用层 应用层
会话层 应用层 应用层
传输层 传输层 传输层
网络层 网际层 网络层
数据链路层 网络接口层 数据链路层
物理层 网络接口层 物理层
  • 协议数据单元PDU(Protocol Data Unit)：对等层次之间传送的数据单位
  • 实体、协议、服务和服务访问点
    • 实体：任何可发送或接收信息的硬件或软件进程
    • 协议：控制两个对等实体进行通信的规则的集合
    • 统一系统相邻两层的实体进行交互的地方，叫做服务访问点 S A P SAP SAP
    • 协议对上层的服务用户是透明的
  • 路由器在转发分组时最高只用到网络层，而没有使用传输层和应用层
  • 为网络中数据交换而建立的规则、标准或约定称为网络协议。网络协议的三要素为：
    1. 语法，即数据与控制信息的结构或格式
    2. 语义，即需要发出何种信息，完成何种动作以及做出何种响应
    3. 同步，即事件实现顺序的详细说明
  • 网络标准化
    • 法定标准
    • 事实标准

操作系统

PV操作

同步与互斥问题
  1. 进程同步
    • 间接相互制约——资源共享
    • 直接相互制约——进程合作
    • 进程同步：指多个相关进程在执行次序上的协调，用于保证这种关系的相应机制称为同步机制
  2. 互斥：在同一个时刻，只允许一个进程访问临界资源
  3. 临界资源：一次只允许一个进程使用的资源。
    1. e.g 打印机、共享变量
    2. 假脱机打印(spooling)——把独占的临界资源共享访问
  4. 临界区：对临界资源进行访问的程序片段
  5. 同步机制应遵循的准则：
    1. 空闲让进
    2. 忙则等待
    3. 有限等待
    4. 让权等待
基于忙等待的互斥方法

  1. 信号量机制(Semaphore)——安全地避免忙等

    1. 0 ≤ S 0\leq S 0≤S表示当前可用的资源数目

      1. S = 1 S=1 S=1实现互斥：二元信号量
      2. S > 2 S>2 S>2实现同步：通用信号量

    2. P ( ) , S ( ) P(),S() P(),S()操作原语：原子操作不会被打断var S : S a m e p h o r e S:Samephore S:Samephore

      1. P ( ) P() P()操作分配资源： S = S − 1 S=S-1 S=S−1若 S < 0 S<0 S<0则置进程为阻塞状态，并将该进程加入阻塞队列；否则继续执行。
      2. V ( ) V() V()操作释放资源： S = S + 1 S=S+1 S=S+1，若 S ≤ 0 S\leq0 S≤0则从阻塞队列；

    3. P、V操作的定义：

      procedure p(var s:samephore);
　　{
　　s.value=s.value-1;
　　if (s.value<0) asleep(s.queue);
　　}
　　
procedure v(var s:samephore);
　　{
　　s.value=s.value+1;
　　if (s.value<=0) wakeup(s.queue);
　　}

    4. 信号量的使用

      1. 必须置一次且只能置一次初值——资源个数
      2. 只能通过 P , V P,V P,V操作改变
基于信号量的方法
  1. 互斥量(Mutex)：信号量值设置为1就是互斥量——用于实现对共享资源和代码的互斥访问；
    1. 0——解锁状态
    2. 1——加锁状态
基于管程的同步与互斥
  1. 管程(Monitor)
    1. 管程是一种高级同步原语
    2. 一个管程定义了一个数据结构和能为并发进程所执行(在该数据结构上)的一组操作，这组操作能够同步进程和改变管程中的数据
  2. 管程的实现：
    1. 同步机制使用：
      1. wait
      2. signal
经典同步与互斥问题

  1. 生产者消费者问题

    /*设有一个可以装A、B两种物品的仓库,其容量无限大,但
要求仓库中A、B两种物品的数量满足下述不等式:
• -M≤A物品数量-B物品数量≤N 
• 其中M和N为正整数. 
§ 试用信号量和PV操作描述A、B两种物品的入库过程.*/

/*分析：A入库——必然导致B最大值增加，但A能够入库的要求为当前库中A数量小于(B数量+N)；B入库同理*/

Semaphore mutex = 1,sa = N,sb = M;
procedure A：
  while(1)
    begin
    P(sa)
		P(mutex)
		A get stored
    V(mutex)
		V(sb)
procedure B：
  while(1)
    begin
    P(sb)
		P(mutex)
    B get stored
    V(mutex)
    V(sa)

    /*三个进程P1、P2、P3 互斥使用一个包含N（N>0）个单元的缓冲区。P1 每次用produce()生成一个正整数并用put()送入缓冲区某一个空单元中；P2 每次用getodd()从该缓冲区中取出一个奇数并用countodd()统计奇数个数；P3 每次用 geteven()从该缓冲区中取出一个偶数并用counteven()统计偶数个数。请用信号量机制实现这三个进程的同步与互斥活动，并说明所定义的信号量的含义。*/

Semaphore mutex = 0,empty = N,odd = 0,even = 0
int number = 0
P1:
while(True)
number = produce()
P(empty)
P(mutex)
put()
v(mutex)
if(number%2==0):
	V(even)
else:
	V(odd)

P2:
cobegin:
while(True)
P(odd);
P(mutex);
getodd();
V(mutex);
V(empty);
countodd();

P3:
cobegin:
while(True)
P(even);
P(mutex);
geteven();
V(mutex);
V(empty);
counteven();

  2. 读者-写者问题

    //读者优先
int readers = 0;//读者计数器
Semaphore mutex = 1;
Semaphore roomEmpty = 1;//写者“写”信号
writer:
  while(1){
    P(roomEmpty);//写者互斥、写者-读者互斥
      writing;//写文件
    V(roomEmpty);//写操作完成
  }
reader:
  while(1){
    
    P(mutex);//互斥操作读者计数器
    if(readers==0){
      P(roomEmpty);//第一个读者进临界区，加锁
    }
    readers++;//读者可同步访问共享数据
    V(mutex);
    
    read;
    
    P(mutex);
    readers--;
    if(readers==0){
      V(roomEmpty);//读者全部读完，解锁
    }
    V(mutex);
  }
  


    //共享读；互斥写、互斥读写；写者优先于读者(一旦有写者，则后续读者必须等待，唤醒时优先考虑写者)--FIFO
int readers = 0;//读者计数器
Semaphore mutex = 1;
Semaphore roomEmpty = 1;//互斥访问
semaphore w = 1;//写者优先
write:
	while(1){
    P(w);
    P(roomEmpty);
    writing;
    V(roomEmpty);
    V(w);
  }
readers:
	while(1){
    P(w);//之前是否有写者排队
    P(mutex);
    if(readers==1){
      P(roomEmpty);
    }
    readers++;
    V(mutex);
    V(w);
    reading;
    P(mutex);
    readers--;
    if(readers==0){
      V(roomEmpty);
    }
    V(mutex);
  }

  3. 哲学家进餐问题

    思路：当且仅当哲学家能同时拿起左右两边的筷子时，哲学家拿起筷子并就餐，但是不能简单地将该问题简化为两次申请筷子的操作——每个哲学家都执行一次申请后，再无空闲筷子可分配，造成死锁，解决方法

    semaphore mutex[5]={1,1,1,1,1}//5只筷子，互斥访问
semaphore count = 4;//最大可同时申请进餐的哲学家数——>不形成环路的最大值
philosopher(int i){
while(true){
  //thinking
	P(count);
  P(mutex[i]);
  P(mutex[(i+1)%5]);
  //eating
  V(mutex[i]);
  V(mutex[(i+1)/5]);
  V(count);
}

  4. 理发师问题

    //理发店有一间工作室，有一名理发师，接待室内有n(n≥1)把椅子。如果没有顾客，理发师就去睡觉；如果理发师在睡觉；有顾客需要理发，则顾客会唤醒他；如果理发师在忙且接待室有空闲椅子，那么此顾客会坐在其中1把空闲的椅子上等待；如果来时所有椅子都有人，那么顾客离去。请采用信号量机制解决该理发师问题
//设置同步信号量service，只有有顾客，理发师才提供理发服务
//设置互斥信号量mutex，互斥访问顾客计数器
int chair=0;
semaphore mutex=1,semaphore service=0,customer=0;

Customer:
while(1){
  P(mutex);
  if(chair<n){
   chair++;
   V(mutex); 
   V(customer);//释放待理发信号
   P(service);//等待被理发师服务
  }else
  {
    V(mutex);
    leave
  }
}

Tony:
while(1){
  P(customer);
  V(service)//有客人来啦！开始营业
  P(mutex);
    chair--;//叫起一位客人，空出一个座位
  V(mutex);
}

  5. 坐车问题

    //假设有n个旅客和一辆汽车，旅客在汽车停靠的站点反复乘车，汽车一次可以乘坐C个旅客(C
//旅客能够上车和下车
//汽车能够载客、运行和卸客
//只有汽车处于载客状态后，旅客才可以上车
//只有C个旅客上车后，汽车才可以出发运行
//只有汽车处于卸客状态后，旅客才可以下车
//只有旅客都下车后，汽车才可以重新载客
semaphore load=0,unload=0,Full=0,Empty=0,mutex=1;
int count=0;
BUS:
while(1){
  V(load);
  P(Full);
  出发;
  V(unload);
  P(Empty);
}

PEOPLE:
while(1){
  P(load);
  P(mutex);
  count++;
  if(count<n){
    V(mutex);
    V(load);
  }else{
    V(mutex);
    V(Full);
  }
  
  坐车;
  
  P(mutex);
  P(unload);
  count--;
  if(count==0){
    V(Empty);
  }else{
    V(unload);
  }
  V(mutex);
}
死锁
  1. 死锁发生的四个必要条件
    1. 互斥条件
    2. 保持和请求条件
    3. 不剥夺条件
    4. 环路等待条件
  2. 死锁发生的原因
    1. 竞争资源
    2. 并发执行的顺序不当
  3. 处理死锁的方法
    1. 死锁预防：破坏死锁产生的四个条件之一
    2. 死锁避免：在资源分配之前判断是否安全，仅当安全才进行分配——e.g 银行家算法
    3. 死锁检测
    4. 死锁解除
  4. 资源分配图——不可简化的资源分配图====>死锁(简化后还存在边)，其中的有边进程为死锁进程
  5. 安全状态：程序存在一个序列 < p 1 , p 2 , … , p n > <p1​,p2​,…,pn​>能够顺利执行
  6. 银行家算法：
    • 可利用资源向量Available
    • 最大需求矩阵Max
    • 分配矩阵Allocation
    • 需求矩阵Need

关于死锁错误的是：（多选）

A. 死锁预防是排除死锁的动态策略

B. 死锁避免是排除死锁的动态策略

C. 系统进入不安全状态必会产生死锁

D. 产生死锁后，系统一定处于不安全状态

答：A、C

死锁预防是排除死锁的静态策略，它使产生死锁的四个必要条件不能同时具备，从而对进程申请资源的活动加以限制，以保证死锁不会发生，A错误。死锁的避免是排除死锁的动态策略，它不限制进程有关资源的申请，而是对进程所发出的每一个申请资源命令加以动态地检查，并根据检查结果决定是否进行资源分配，B正确。系统进入不安全状态（四个死锁必要条件同时发生）也未必会产生死锁，产生死锁后系统一定处于不安全状态，C错误，D正确。

I/O系统

I/O设备
  • 按传输速度：高速、中速、低速
  • 按信息交换单位：字符设备、块设备
  • 按共享属性：独占设备、共享设备、虚拟设备
设备与控制器间接口
  • 数据信号
  • 控制信号
  • 状态信号
I/O控制技术

  • 程序控制I/O

    1. I/O请求由程序发起，并等待操作完成
    2. 数据的读写通过CPU
    3. 在外设处理数据时，CPU只能等待

  • 中断驱动方式

    1. I/O操作由程序发起，在操作完成时由外设向CPU发出中断，并通知该程序
    2. 数据的读写通过CPU
    3. 虽然CPU可以在外设处理数据时继续执行当前程序或其他程序，但CPU传输效率低，只适用于数据传输率较低的设备

  • 直接存储访问方式DMA

    1. 由程序设置DMA控制器中的寄存器值后，发起I/O操作，由DMA控制器完成内存与外设的成批数据交换，在操作完成时由DMA控制器向CPU发起中断请求。
    2. CPU只干预I/O操作的开始和结束，DMA是l/O设备与主存之间由硬件组成的直接数据通路
    3. 适用于高速设备成批读取数据

  • I/O通道控制设备

    1. 通道指令——
    2. 由操作系统构造通道指令并存放在内存中
    3. 执行一个通道程序可以完成N组I/O操作
缓冲技术

  • 缓冲技术可以提高外设的利用率

    1. 匹配CPU与不同外设的处理速度
    2. 减少对CPU的中断次数
    3. 提高CPU与外设间的并行性

  • 缓冲池(buffer pool)

  • 单缓冲(一个缓冲区)

    1. 只传送以完整形式存在于缓冲区中的数据(填满后传)
    2. 只向空缓冲区注入新的数据
    3. CPU只处理以完整形式存在于缓冲区内的数据(传完后处理)

  • 双缓冲

    1. 两个缓冲区，CPU与外设都可以连续处理而无需等待对方
    2. 要求CPU与外设速度相近
假脱机技术SPOOLing

  • 把独享设备转变成具有共享特征的虚拟设备

  • 提高设备利用率

  • 在多道程序系统中，专门利用一道程序(SPOOLing程序)来完成对设备的I/O操作，无需使用外围I/O处理机

磁盘

  1. 组成：扇面、磁道(柱面)、扇区、磁头

  2. 磁盘与操作系统启动：

    1. MBR(主引导扇区)
    2. DPT分区表(DPT)
    3. 分区引导扇区(DBR)

  3. 磁盘调度算法

    常见算法

    1. 先来先服务
    2. 最短寻道时间

    考虑磁道距离+磁头移动方向

    1. 扫描算法
    2. 循环扫描算法

    • 先来先服务：按照给出的访问顺序直接访问

    • 最短寻道时间：每次寻道均寻找从当前磁道移动至目标磁道所需移动道数最短的磁道

    • 扫描(SCAN)算法：在磁头当前移动方向上选择与当前磁头所在磁道距离最近的请求作为下一次服务的对象，与电梯运行方式类似

      SCAN算法对最近扫描过的区域不公平，因此，它在访问局部性方面不如前两种好

    • 循环扫描算法：循环扫描算法规定磁头单向移动。例如，只自里向外移动，当磁头移到最外的被访问磁道时，磁头立即返回到最里的欲访磁道，即将最小磁道号紧接着最大磁道号构成循环，进行扫描

  4. 提高I/O速度的主要途径

    • 选择性能好的磁盘
    • 并行化
    • 采用适当的调度算法
    • 设置磁盘高速缓冲区

  5. 廉价冗余磁盘阵列

    1. 利用冗余技术提高可靠性

    2. 利用并行提高性能

    3. 普通磁盘驱动器只能通过CRC(循环冗余校验)码提供简单的容错，RAID建立在每个磁盘驱动器的硬件容错功能之上，可提供更高的安全性

      RIAD0 RAID1 RAID2
      无冗余校验功能，并行交叉存取提高I/O速度 镜像磁盘冗余阵列，读性能好，对应镜像盘同时读取；写性能由写速度最慢的盘决定，故写性能不一定好；有效容量仅50% 采用海明码检错、纠错，数据位交叉写入磁盘，“按位条带化”
      RAID3 RAID4 RAID5
      采用奇偶校验冗余的磁盘阵列，数据位交叉写入磁盘。将磁盘分组，采用字节级别的条带，读写要访问组中所有盘，每组中有一个盘作为校验盘。 数据块交叉，用一个校验盘，将数据按块交叉存储在多个磁盘上；使用较少的盘参与操作，以使磁盘阵列可以并行进行多个数据的磁盘操作 数据块交叉和分布的冗余校验，将数据和校验都分布在各个磁盘中，没有专门的奇偶校验去东区。

    4. 最少磁盘数量：

      磁盘类型 最少磁盘数量 磁盘数量
      RAID0 2 n
      RAID1 2 n*2
      0+1(组内条带化，组间镜像) 4 n*2
      1+0(组内镜像，组间条带化) 4 n*2
      2 7* n + l o g 2 n n+log_{2}n n+log2​n
      3 3 n+1
      4 3 n+1
      5 3 n+1
      6 4 n+2

      补充：

  6. 码距<=>海明距离，码距越大，纠错能力越强，但数据冗余也越大，编码效率低。

文件系统

文件系统的基本概念
文件系统模型的三个层次
  1. 文件系统接口
    1. 命令行接口——用户和文件系统的交互接口
    2. 程序接口——用户程序和文件系统的接口；用户程序可以通过系统调用的形式来取得文件系统的服务
  2. 对象操作管理的软件集合：
    1. 对文件存储空间的管理
    2. 对文件目录的管理
    3. 用户将文件的逻辑地址转换为物理地址的机制
    4. 对文件读和写的管理；
    5. 对文件的共享和保护的功能
  3. 对象及其属性
    • 文件系统管理的对象
      1. 文件——直接对象
      2. 目录——文件系统必须包括目录，每个目录项中必须包括文件名以及文件所在的物理地址(或指针)
      3. 磁盘存储空间——文件和目录必定占用存储空间
文件名

文件名.扩展名

文件类型
  • 性质和用途：系统文件、库文件、用户文件
  • 数据形式：源文件、目标文件、可执行文件
  • 保护级别：只读文件、读写文件、执行文件、不保护文件
  • 逻辑结构：有结构文件、无结构文件
  • 物理结构：顺序文件、链接文件、索引文件
文件的逻辑结构

提高检索效率、便于修改、降低文件存储代价

  1. 流式结构——单位是字节
  2. 记录式文件结构——单位是记录
  3. 树形结构
文件物理结构

在存储介质上的存放方式，表示了一个文件在文件存储介质上的位置、链接和编目方法

  1. 连续结构——容易出现磁盘碎片，适合变化不大的文件；方便顺序存取和随机存取(有序)

  2. 索引结构

    • 一个文件的信息存放在若干个不连续物理块中；
    • 系统为每个文件建立一个专用数据结构——索引表；
    • 索引表就是磁盘块地址数组，其中第i个条目指向文件的第i块
    • 每个文件的索引表长度是不一样的，故不能存放在FCB中，FCB只记录索引表的地址
    1. 索引文件：为每个文件建立逻辑块号与物理块号的对照表，称为文件的索引表；文件由数据文件和索引表构成。这种文件称为索引文件；
    2. 索引文件的操作：
      1. 在存储区中，索引文件占两个区——索引区+数据区
      2. 访问索引文件：先读取文件索引区，由逻辑块号查得物理块号；再访问物理块号获得所需信息
      3. [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-VlAf9r28-1638973441537)(/Users/cleopatra/Library/Application Support/typora-user-images/image-20211104154433234.png)]
      4. 本身带来了系统开销：内外存空间+存取时间

  3. 串联结构

    • 按顺序由串联的块组成；即文件的信息按存储介质的物理特性存于若干块中
    • 对于记录式文件，一块可以包含一个逻辑记录或多个逻辑记录，也可以若干物理块包含一个逻辑记录

    空间利用率高，顺序存取效率高；

    随机存取效率低，可靠性不强(指针出错)；链接指针占用一定空间

文件存取方式及存储介质
  1. 顺序存取、随机存取(提供读写位置)
  2. 存储介质：磁盘、磁带、光盘；
  3. 物理块(块block、簇cluster)：数据存储、传输和分配的单位，存储设备通常划分为大小相等的物理块，统一编号
文件系统的实现方法
目录
  1. 由文件说明索引组成的用于文件检索的特殊文件
  2. 文件目录的主要内容：文件访问和控制信息(不包括文件内容)
  3. 文件属性信息，部分为用户可获取
  4. 基本信息：文件名；别名的数量
  5. 文件类型
  6. 地址信息(存放位置、文件长度)
  7. 访问控制信息：文件所有者、访问权限
  8. 使用信息：创建时间；最后一次读访问的时间+用户；最后一次写访问的时间+用户
目录分级
单级目录
二级目录

在根目录下，每个用户对应一个目录，在用户目录下是该用户的文件，而不再有下级目录。(适用于多用户系统)

多级目录

在较高的目录级，其目录表目为下一级目录名以及一个指向其目录的指针，在最后一级目录，这个指针指向文件的物理地址

特点：

  1. 层次清楚
  2. 可解决文件重名问题
  3. 查找速度快
  4. 目录级别太多会增加路径检索时间

目录的实现：

  1. 直接法：文件名+文件控制块
  2. 间接法：文件名+文件控制块的地址(索引号)

文件目录的查询：

  1. 顺序查询
  2. Hash方法——“杂凑法”

便于共享的目录组织

  1. 文件的共享要求系统能提供一种方法：使存储空间内保存一份副本，而所有要共享该文件的用户可用相同的或不同的文件名来访问它

  2. 共享目录实例练习：

    用户A有两个w文件 F 1 , F 2 ， 用 户 B 有 三 个 文 件 F_{1},F_{2}，用户B有三个文件 F1​,F2​，用户B有三个文件 F 1 , F 3 , F 5 F_{1},F_{3},F_{5} F1​,F3​,F5​其中用户A的文件 F 1 F_{1} F1​与用户B的文件 F 1 F_{1} F1​不是同一个文件，用户B的文件 F 3 F_{3} F3​和用户A的文件 F 2 F_{2} F2​是同一个文件。

    请针对以上需求，给出一种目录组织方案。画图辅助说明。

    【分析】：

    A − − − − F 1 A----F_{1} A−−−−F1​与 B − − − − F 1 B----F_{1} B−−−−F1​不是同一个文件，故各处于各自的文件目录下，映射向不同的文件物理地址即可；

    是同一个文件的不同目录下的文件需通过同一个索引节点映射向同一个文件，针对进一步需求——A删除文件，仅删除自己目录下的文件/同时删去所有与A删除的文件相同的文件设置的计数器情况不同；

    全局同步：count=1，任何目录下操作删去文件则count-1，系统负责删去文件，各目录下文件对应项删去

    异步删去：count=共享该文件的目录数，任何目录下删去该文件，count-1，仅删去该目录下该文件对应项以及映射关系即可；当count=0时，系统负责删去文件

文件控制块
  1. 基本信息：文件名；物理位置；文件逻辑结构；文件物理结构
  2. 访问控制信息：文件所有者、访问权限
  3. 使用信息：创建时间、上一次修改时间、当前使用信息
文件描述符
  • 一般为一个非负整数，唯一标识一个打开的文件
文件系统实例分析

在采用索引的文件系统中，已知索引节点可设置为10个直接索引，1个一次间接索引，1个2次间接索引。文件块大小为s字节，文件块号为t字节。这个文件系统支持的最大文件是多大？

10个间接索引能索引10块数据

1个一次间接索引能够索引的数据块的数量为 s / t s/t s/t

一个二次间接索引能够索引的数据块数量为 ( s / t ) 2 (s/t)^{2} (s/t)2

故，文件最大为 ( 10 + s / t + ( s + t ) 2 ) ∗ s (10+s/t+(s+t)^{2})*s (10+s/t+(s+t)2)∗s

进程与线程

进程的概念

  • 顺序执行

    特征：顺序性、封闭性、可再现性

  • 并发：设有两个活动a1和a2，如果在某一指定的时间t，无论a1和a2是在同一处理机上还是在不同的处理机上执行，只要a1和a2都处在各自的起点和终点之间的某一处，则称a1和a2是并发执行的——强调时间段

    特征：

    1. 间断性：执行——暂停——执行

    2. 非封闭性：多个程序共享系统中的资源，程序间相互影响

    3. 不可再现性：在初始条件相同的情况下，程序的额执行结果依赖于执行的次序

      并发程序的无关性是进程与时间无关的一个充分条件——Bernstein条件：

      可并发当且仅当：

      1. 进制间读集与写集交集为空集
      2. 写集间交集为空集

  • 并行：强调时间点——两个程序，在同一时间度量下同时运行在不同的处理机上，则称这两个程序是并行执行的

  • 并发可能是伪并行，也可能是真并行

进程的引入
  1. 进程是程序的一次执行，是程序及其数据，是在处理机上顺序执行时发生的活动
  2. 进程时系统进行资源分配和调度的一个独立单位
  3. 特征：动态性；并发性；独立性；异步性
  4. 进程的结构特征：
    • 程序段、数据段、进程控制块PCB
    • 一个进程应该包括：程序的代码；程序的数据；PC中的值，用来指示下一条将运行的指令
    • 一组通用的寄存器的当前值，堆、栈
    • 一组系统资源(打开的文件)
  5. 利弊：提高效率；空间开销、时间开销
进程的状态与控制

  • 进程控制的主要任务：创建、撤销进程、实现进程的状态转换——内核实现

  • 进程控制的实现：原语*

  1. 进程的三种基本状态

    1. 就绪状态：进程已获得除处理机外的所需资源，等待分配处理机资源，只要分配CPU就可以执行
    2. 执行状态：占用处理机资源；处于此状态的进程数目小于等于CPU的数目。在没有其他进程可以执行时，通常会自动执行系统的idle进程(相当于空操作)背单词啦啊喂
    3. 阻塞状态：正在执行的进程，由于发生某种事件而暂时无法执行，便放弃处理机处于暂停状态
    4. 状态转换：

  2. 进程控制块

    系统为每个进程定义了一个数据结构：进程控制块PCB

    作用：进程创建、撤销；进程的唯一标志；限制系统进程数目

    内容：

    • 进程标识符：每个进程必须有一个唯一的标识符
    • 程序和数据地址：把PCB与其程序和数据联系起来
    • 现行状态：方便管理
    • 现场保护区
    • 互斥和同步机制
    • 进程通信机制
    • 优先级
    • 资源清单
    • 链接字
    • 家族关系

    组织方式：线性表、链接方式、索引方式

    • 进程上下文切换
      • 通常由调度器执行
      • 保存进程执行断点
      • 切换内存映射(页表基址、flush TLB)
    • 陷入内核
      • CPU状态改变
      • 由中断、异常、Trap指令(系统调用)引起
      • 需要保存执行现场(寄存器、堆栈等)
    • 系统调用
      • 涉及进程从用户态到内核态的切换，这个时候的切换主要是寄存器上下文的切换，和通常所说的进程上下文切换不同

    进程包含了两个概念：资源拥有者和可执行单元

    线程：将资源与计算分离，提高并发效率
    进程与线程

    • 现代操作系统将资源拥有者称为进程

    • 可执行单元称为线程：CPU调度和分配的单位

    引入线程的目的：

    • 减小进程切换的开销
    • 提高进程内的并发程序
    • 共享资源
    区分
    CPU调度
    调度

    控制、协调多个进程对CPU的竞争

    调度的类型
    1. 高级调度——接纳作业的数量、类型
    2. 中级调度——内外存交换
    3. 低级调度——微观调度，“进程/线程调度”
    进程切换
    时机
    • 用户系统调用：来自程序的显式请求(如打开文件)，该进程多半会被阻塞
    • 陷阱：最末一条指令导致出错，会引起进程移至退出状态
    • 中断：外部因素影响当前指令的执行，控制被转移至中断处理程序
    步骤
    1. 保存处理器的上下文，包括程序计数器和其他寄存器
    2. 用新状态和其他相关信息更新正在运行进程的PCB
    3. 把进程移至合适的队列
    4. 选择另一个要执行的进程
    5. 更新被选中进程的PCB
    6. 从被选中进程PCB中重新装入CPU上下文
    面向用户的调度性能准则

    • 周转时间：作业从提交到完成所经历的时间

      • 平均周转时间
      • 带权周转时间

    • 响应时间：用户输入一个请求到系统给出首次响应的时间

    • 截止时间：开始截止时间和完成截止时间——实时系统

    • 优先级

    • 公平性

    • 吞吐量：单位时间内所完成的作业数

    常用调度算法
    • 先来先服务——按作业提交的先后顺序调度
    • 最短作业优先——按预计执行时间调度
    • 最短剩余时间优先——按完成时间调度
    • 最高响应比优先——响应比 R P = T w a i t e d + T n e e d e d T n e e d e d RP=\frac{T_{waited}+T_{needed}}{T_{needed}} RP=Tneeded​Twaited​+Tneeded​​
    交互式系统的调度算法
    1. 时间片轮转
    2. 多级队列
    3. 多级反馈队列

    内存管理

    基本概念
    1. 地址空间：一个进程所能用于访问内存的地址集合
    2. 逻辑空间：虚拟地址，程序所使用的地址
    3. 物理地址：存储器地址
    碎片
    • 内碎片：分配给作业的存储空间中未被利用的部分(无法被整理，但在作业完成后会得到释放)
    • 外碎片：系统中无法利用的空闲小分区(动态分区管理会产生外部碎片)外碎片是造成内存系统性能下降的主要原因，外部碎片可以整理后清除
    • 消除外部碎片的方法：紧凑技术
    紧凑技术
    • 通过移动作业，把多个分散的小分区拼凑成一个大分区的方法——消除外部碎片
    • 实现支撑：动态重定位，作业在内存中的位置发生了变化，这就必须对其地址加以修改或改变
    分区的存储保护
    1. 界限寄存器方法
      1. 上下界寄存器方法
      2. 基址、限长寄存器(BR、LR)方法
    2. 存储保护键方法
      1. 存储块保护键——加锁；作业保护键——加钥匙
      2. 作业运行时检查钥匙与锁是否匹配，不匹配则系统发出保护性中断信号，停止作业运行
    扩充内存的两种方法
    • 覆盖：把一个程序划分为一系列功能相对独立的程序段，让执行时不要求同时装入内存的程序段组成一组(称为覆盖段)，共享主存的同一个区域
      • 对用户不透明，增加了用户负担
    • 交换：把暂时不用的某个或某些程序及其数据的部分或全部从主存移到辅存中去，以便腾出存储空间；接着把指定程序或数据从辅存读到相应的主存中，并将控制转给它，让其在系统上运行
      • 增加并发运行的程序数目，并给用户提供适当的响应时间，编写程序时不影响程序结构
      • 对换入和换出的控制增加处理机开销；程序整个地址空间都进行传送，没有考虑执行过程中地址访问的统计特性
    分区式内存管理
    • 内存的碎片问题：无论固定分区，还是可变分区都普遍存在的问题；内存紧缩
    • 程序需要装入连续的内存空间
    • 很难满足程序对内存空间的动态要求
    • 很难找到一个绝对有效的内存分配/回收策略
    • 内存利用率低
    页式内存管理
    基本思想

    把一个逻辑地址连续的程序分散存放到若干不连续的内存区域中，并保证程序的正确执行

    纯分页系统

    不具备页面对换的分页存储管理方式，不支持虚拟存储器功能；在调度一个作业时，必须把它所有的页一次装到主存的页框内，如果当时页框数不足，则作业必须等待，系统再调度另外作业

    • 没有外碎片，每个内碎片不超过页大小——平均内碎片大小为页大小的1/2
    • 程序不必连续存放
    • 便于改变程序占用空间的大小
    • 但程序全部装入内存；有内碎片
    基本概念
    • 页：把作业的地址空间分成一些大小相等的片，称之为页面(page)或页，各页从0开始编号
    • 存储块：把物理内存的存储空间也分为与页面大小相同的片，这些片称为存储块，或称为页框，同样从0开始编号
    • 页表：为了便于在内存中找到进程的每个页面所对应的页框，分页系统中为每一个进程配置一张页表，进程逻辑地址空间中的每一页，在页表中都有对应的一个页表项
    数量关系

    • 页大小：与块大小一样是由硬件来决定的，通常为2 的幂

    • 逻辑地址空间为 2 m 2^{m} 2m，且页大小为 2 n 2^{n} 2n，那么逻辑地址的高 m − n m-n m−n位表示页号，低n位表示页偏移

    • 地址结构

      地址 页号/块号 偏移
      逻辑地址 页号p 页内偏移w
      物理地址 块号b 块内偏移d

      页内偏移=块内偏移

      页号和块号之间的联系？地址变化——页表查找

    页表
    • 存放在内存中，属于进程的现场信息
    • 用途
      • 记录进程的内存分配情况
      • 实现进程运行时的动态重定位
    • 访问一个数据需要访存2次——页表一次+内存一次
    • 页表的基址和长度由页表寄存器给出
    页表查找(地址变换机构)
    • 页表内容：页号对应存储块号——页号作为页表项的索引不需要以数据形式存储
    • 地址转换机构
      • 页表寄存器中页表长度与页号比较——越界中断
      • 页表始址与 页 号 × 页 表 项 长 度 页号\times页表项长度 页号×页表项长度相加
      • 根据相加结果访问对应页表项，得到的数据即为页号对应块号
      • 块号与页内地址拼接得到物理地址

    e.g 假设虚拟地址占8位，物理地址占10，每个页面的大小是64Bytes。问：

    • 一共有多少个虚拟页面
    • 一共有多少个物理页面(页框)
    • 每个页表中有多少个页表项
    • 假定页表是一个数组 { 2 , 5 , 1 , 8 } \left\{2,5,1,8\right\} {2,5,1,8}，请问对应虚拟地址0d241的物理地址是多少

    解答

    • 64 = 2 6 64=2^{6} 64=26页内偏移占6位，即页号占 8 − 6 = 2 8-6=2 8−6=2位，共有 2 2 = 4 2^{2}=4 22=4个虚拟页面
    • 同1.共有 2 10 − 6 = 16 2^{10-6}=16 210−6=16个物理页面
    • 一共有 4 4 4个虚拟页面——一个页表中有 4 4 4个页表项
    • 0 d 241 = 0 b 11   110001 0d241 = 0b11\ 110001 0d241=0b11 110001对应页号为3，即其对应的页框号为8(页号从0开始)，物理地址为 0 b 1000   110001 = 0 d 561 0b1000\ 110001=0d561 0b1000 110001=0d561
    页表的分级
    一级页表
    • 若逻辑地址空间很大，则划分的页较多，页表就很大，占用的存储空间大(要求页表为连续存储)
    • 解决方法——多级页表
      • 页表分级管理
      • 动态调入页表：只将当前需用的部分页表项调入内存，其余的需用时再调入
    二级页表

    • 将页表再进行分页，离散地将各个页表页面存放在不同的物理块中，同时再建立一张外部页表用以记录页表页面对应的物理块号(页表的页表)

    • 正在运行的进程，必须把外部页表(页表的页表)调入内存，而动态调入内部页表。只将当前所需的一些内层页表装入内存，其余部分根据需要再陆续调入

    • 逻辑地址：

      页表页面号 页号 页内地址

      e.g 对于32位地址空间，页面大小为4K，如每个页表项占4个字节，则页表需占 4 M B 4MB 4MB空间，则页表页面号：10位，页号：10位，页内地址：12位

    • 地址变换：

      • 外部页表寄存器存放外部页表始址

      • 与 页 表 页 面 号 × 页 表 项 大 小 页表页面号\times页表项大小 页表页面号×页表项大小相加得到外部页表中对应位置

      • 取外部页表项(存放对应的第二级页表始址)与 页 号 × 页 表 项 大 小 页号\times页表项大小 页号×页表项大小得到对应第二级页表的页表项，取出数据(物理页框号)

      • 与页内地址拼接得到物理地址

        [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-bUVf38I3-1638973441538)(/Users/cleopatra/Library/Application Support/typora-user-images/image-20211116162559370.png)]

      • e.g 页面的大小为8 Bytes，物理内存为128 Bytes，虚拟地址空间为512 Bytes。假设每个页表项占一个字节，设计一个多级页表，并回答如何查询虚拟地址 0 x 3 A 0x3A 0x3A对应的物理地址

      解答

      • 页内偏移量： 8 = 2 3 8=2^{3} 8=23，3位

      • 物理页框号： 128 / 8 = 16 = 2 4 128/8=16=2^{4} 128/8=16=24，4位

      • 虚拟页号： 512 / 8 = 64 = 2 6 512/8=64=2^{6} 512/8=64=26，6位，逻辑地址 512 = 2 9 512=2^{9} 512=29，9位

      • 页表项1 Bytes——一个页面存储8个页表项，一个页表最多管理8个页面——需要三位表示页号

      • 一级页号 二级页号：3位 页内偏移：3位

        推出一级页号占3位

      • 0 x 3 A = 0 b 000   111   010 0x3A=0b000\ 111\ 010 0x3A=0b000 111 010推出一级页号为0，二级页号为7，页内偏移为2

      • 查询步骤：

        1. 查找一级页表中的第0页表项，从中找到对应的二级页表的物理地址，读出相应的物理页框；
        2. 查找对应二级页表的第7页表项，从中找到对应的物理页框号；
        3. 上一步得到的物理页框的初始地址+偏移量010即为物理地址

    • 多级页表

      • 多级页表结构中，指令所给出的地址除偏移地址外的各部分全是各级页表的页表号或页号，而各级页表中记录的全是物理页号，指向下级页表或真正的被访问页
    快表(联想存储器)，TLB

    • 特殊的高速缓冲存储器Cache，内容是页表中的一部分或全部内容

    • CPU产生逻辑地址的页号，首先在快表中寻找，若命中就找出其中对应的物理块；若未命中，再到页表中找到其对应的物理块，并将相应的页表项复制到快表。若快表中内容满，则按某种算法淘汰某些页

    • 快表一般包含

      valid有效位 Tag(virtual page number)虚拟页号 page frame number物理页框号

    • 有效访问时间

      假如查找TLB需要20ns，访问内存需要100ns，TLB命中率为80%

      • 有效内存访问时间= ( 2 ∗ 100 n s + 20 n s ) ∗ 0.2 + ( 100 n s + 20 n s ) ∗ 0.8 (2*100ns+20ns)*0.2+(100ns+20ns)*0.8 (2∗100ns+20ns)∗0.2+(100ns+20ns)∗0.8
      • 过程分析：不命中的情况下，首先访问TLB未命中(20ns)，再访问内存内页表(100ns)，最后根据页表内容访问内存内物理页(100ns)；命中的情况下，首先访问TLB命中(20ns)，再根据快表页框号访问对应物理页面(100ns)

    • 哈希页表、反置页表

      • 哈希页表：处理超过32位地址空间的常用方法：以虚拟页号作为哈希值
      • 反置页表：按照物理地址排序，查找依据虚拟地址

你可能感兴趣的:(计算机基础综合,操作系统,计算机网络)

  • Cell Insight | 单细胞测序技术又一新发现，可用于HIV-1和Mtb共感染个体诊断 尐尐呅
    结核病是艾滋病合并其他疾病中导致患者死亡的主要原因。其中结核病由结核分枝杆菌（Mycobacteriumtuberculosis,Mtb）感染引起，获得性免疫缺陷综合症（艾滋病）由人免疫缺陷病毒（Humanimmunodeficiencyvirustype1,HIV-1）感染引起。国家感染性疾病临床医学研究中心/深圳市第三人民医院张国良团队携手深圳华大生命科学研究院吴靓团队，共同研究得出单细胞测序
  • Linux下QT开发的动态库界面弹出操作（SDL2） 13jjyao QT类qt开发语言sdl2linux
    需求：操作系统为linux，开发框架为qt，做成需带界面的qt动态库，调用方为java等非qt程序难点：调用方为java等非qt程序，也就是说调用方肯定不带QApplication::exec()，缺少了这个，QTimer等事件和QT创建的窗口将不能弹出(包括opencv也是不能弹出)；这与qt调用本身qt库是有本质的区别的思路：1.调用方缺QApplication::exec()，那么我们在接口
  • PHP环境搭建详细教程 好看资源平台 前端php
    PHP是一个流行的服务器端脚本语言，广泛用于Web开发。为了使PHP能够在本地或服务器上运行，我们需要搭建一个合适的PHP环境。本教程将结合最新资料，介绍在不同操作系统上搭建PHP开发环境的多种方法，包括Windows、macOS和Linux系统的安装步骤，以及本地和Docker环境的配置。1.PHP环境搭建概述PHP环境的搭建主要分为以下几类：集成开发环境：例如XAMPP、WAMP、MAMP，这
  • python os 环境变量 CV矿工 python开发语言numpy
    环境变量：环境变量是程序和操作系统之间的通信方式。有些字符不宜明文写进代码里，比如数据库密码，个人账户密码，如果写进自己本机的环境变量里，程序用的时候通过os.environ.get（）取出来就行了。os.environ是一个环境变量的字典。环境变量的相关操作importos"""设置/修改环境变量：os.environ[‘环境变量名称’]=‘环境变量值’#其中key和value均为string类
  • 【华为OD技术面试真题精选 - 非技术题】 -HR面，综合面_华为od hr面 一个射手座的程序媛 程序员华为od面试职场和发展
    最后的话最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！资料预览给大家整理的视频资料：给大家整理的电子书资料：如果本文对你有帮助，欢迎点赞、收藏、转发给朋友，让我有持续创作的动力！网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化的资料的朋友，可以点击这里获
  • 【从浅识到熟知Linux】Linux发展史 Jammingpro 从浅学到熟知Linuxlinux运维服务器
    归属专栏：从浅学到熟知Linux个人主页：Jammingpro每日努力一点点，技术变化看得见文章前言：本篇文章记录Linux发展的历史，因在介绍Linux过程中涉及的其他操作系统及人物，本文对相关内容也有所介绍。文章目录Unix发展史Linux发展史开源Linux官网企业应用情况发行版本在学习Linux前，我们可能都会问Linux从哪里来？它是如何发展的。但在介绍Linux之前，需要先介绍一下Un
  • linux 发展史 种树的猴子 内核java操作系统linux大数据
    linux发展史说明此前对linux认识模糊一知半解，近期通过学习将自己对于linux的发展总结一下方便大家日后的学习。那Linux是目前一款非常火热的开源操作系统，可是linux是什么时候出现的，又是因为什么样的原因被开发出来的呢。以下将对linux的发展历程进行详细的讲解。目录一、Linux发展背景二、UINIX的诞生三、UNIX的重要分支-BSD的诞生四、Minix的诞生五、GNU与Free
  • 2023最详细的Python安装教程（Windows版本） 程序员林哥 Pythonpythonwindows开发语言
    python安装是学习pyhon第一步，很多刚入门小白不清楚如何安装python，今天我来带大家完成python安装与配置，跟着我一步步来，很简单，你肯定能完成。第一部分：python安装（一）准备工作1、下载和安装python(认准官方网站)当然你不想去下载的话也可以分享给你，还有入门学习教程，点击下方卡片跳转进群领取（二）开始安装对于Windows操作系统，可以下载“executableins
  • 计算机网络八股总结 Petrichorzncu 八股总结计算机网络笔记
    这里写目录标题网络模型划分（五层和七层）及每一层的功能五层网络模型七层网络模型（OSI模型）==三次握手和四次挥手具体过程及原因==三次握手四次挥手TCP/IP协议组成==UDP协议与TCP/IP协议的区别==Http协议相关知识网络地址，子网掩码等相关计算网络模型划分（五层和七层）及每一层的功能五层网络模型应用层：负责处理网络应用程序，如电子邮件、文件传输和网页浏览。主要协议包括HTTP、FTP
  • 深入浅出 -- 系统架构之负载均衡Nginx的性能优化 xiaoli8748_软件开发 系统架构系统架构负载均衡nginx
    一、Nginx性能优化到这里文章的篇幅较长了，最后再来聊一下关于Nginx的性能优化，主要就简单说说收益最高的几个优化项，在这块就不再展开叙述了，毕竟影响性能都有多方面原因导致的，比如网络、服务器硬件、操作系统、后端服务、程序自身、数据库服务等，对于性能调优比较感兴趣的可以参考之前《JVM性能调优》中的调优思想。优化一：打开长连接配置通常Nginx作为代理服务，负责分发客户端的请求，那么建议开启H
  • 计算机毕业设计PHP仓储综合管理系统（源码+程序+VUE+lw+部署） java毕设程序源码王哥 php课程设计vue.js
    该项目含有源码、文档、程序、数据库、配套开发软件、软件安装教程。欢迎交流项目运行环境配置：phpStudy+Vscode+Mysql5.7+HBuilderX+Navicat11+Vue+Express。项目技术：原生PHP++Vue等等组成，B/S模式+Vscode管理+前后端分离等等。环境需要1.运行环境：最好是小皮phpstudy最新版，我们在这个版本上开发的。其他版本理论上也可以。2.开发
  • 经纬恒润二面&三七互娱一面&元象二面 Redstone Monstrosity 面试前端
    1.请尽可能详细地说明，进程和线程的区别，分别有哪些应用场景？进程间如何通信？线程间如何通信？你的回答中不要写出示例代码。进程和线程是操作系统中的两个基本概念，它们在计算机系统中扮演着不同的角色，并且在不同的应用场景中发挥作用。进程和线程的区别定义：进程：进程是操作系统进行资源分配和调度的基本单位。每个进程都有独立的内存空间和系统资源。线程：线程是进程内的一个执行单元，是操作系统进行调度的最小单位
  • ERP企业资源规划系统 点滴~ 教育电商
    ERP企业资源规划系统ERP（EnterpriseResourcePlanning）企业资源规划系统是一种综合性的管理信息系统，旨在通过信息技术手段实现对企业内部资源的全面规划、管理和控制。以下是对ERP企业资源规划系统的详细解析：一、定义与核心思想ERP系统建立在信息技术基础上，以系统化的管理思想，为企业决策层及员工提供决策运行手段的管理平台。它不仅仅是一个软件，更重要的是一个管理思想，实现了企
  • 微信小程序开发注意事项 jun778895 微信小程序小程序
    微信小程序开发是一个融合了前端开发、用户体验设计、后端服务（可选）以及微信小程序平台特性的综合性项目。这里，我将详细介绍一个典型的小程序开发项目的全过程，包括项目规划、设计、开发、测试及部署上线等各个环节，并尽量使内容达到或超过2000字的要求。一、项目规划1.1项目背景与目标假设我们要开发一个名为“智慧校园助手”的微信小程序，旨在为学生提供一站式校园生活服务，包括课程表查询、图书馆座位预约、食堂
  • 淘宝网优惠券，你的购物神器，你知道吗？ 氧惠超好用
    淘宝网作为中国最大的综合性网络零售平台，吸引了无数消费者的目光。在淘宝网上，我们不仅可以找到丰富多样的商品，还可以通过各种促销活动享受到购物的乐趣。其中，淘宝网优惠券就是一项备受消费者喜爱的福利。那么，淘宝网优惠券究竟有何魅力，能够让我们在购物时更加得心应手呢？淘宝网优惠券作为一种促销手段，为消费者提供了实实在在的购物优惠。无论是店铺优惠券、平台优惠券还是特定商品优惠券，都能在一定程度上降低购物成
  • C++常见知识掌握 nfgo c++开发语言
    1.Linux软件开发、调试与维护内核与系统结构Linux内核是操作系统的核心，负责管理硬件资源，提供系统服务，它是系统软件与硬件之间的桥梁。主要组成部分包括：进程管理：内核通过调度器分配CPU时间给各个进程，实现进程的创建、调度、终止等操作。使用进程描述符（task_struct）来存储进程信息，包括状态（就绪、运行、阻塞等）、优先级、内存映射等。内存管理：包括物理内存和虚拟内存管理。通过页表映
  • AUTO TECH 2025 广州国际汽车软件与安全技术展览会 ws201907 汽车安全
    AUTOTECH2025广州国际汽车软件与安全技术展览会ChinaGuangzhouSoftware-DefinedVehicleExpo2025亚洲领先的汽车软件与安全技术专业展会——是与来自世界各地的汽车工程师们交流的最佳平台！广州国际汽车软件与安全技术展览会是AUTOTECH2025华南展专题展之一，汇集了各种汽车嵌入式软件开发与应用、车载操作系统、智驾功能安全与SOTIF、基础软件平台、车
  • 设计好了产品组合，获客没你想得那么难 老姜观察
    放眼望去，财富管理公司的综合服务已经成为大势所趋。所谓的综合服务，其实就是财富管理公司的产品组合逐渐丰富和完善。然而，在对客户进行综合服务的过程中，财富管理公司常常会面对各种问题。例如：如何评估公司是否应当开展一项服务或者产品？如何定义一项服务（产品）的考核指标？如何配置资源投入不同的产品线？以保险为例，财富管理公司经常需要考虑的问题有：我是否要导入保险业务？如何考核这项业务的发展？我应该投入多少
  • python中文版软件下载-Python中文版 编程大乐趣
    python中文版是一种面向对象的解释型计算机程序设计语言。python中文版官网面向对象编程，拥有高效的高级数据结构和简单而有效的方法，其优雅的语法、动态类型、以及天然的解释能力，让它成为理想的语言。软件功能强大，简单易学，可以帮助用户快速编写代码，而且代码运行速度非常快，几乎可以支持所有的操作系统，实用性真的超高的。python中文版软件介绍：python中文版的解释器及其扩展标准库的源码和编
  • 关闭Windows自动更新的6种方法 Gemini1995 windows
    在Windows操作系统中，可以使用多种方法来关闭自动更新。以下是其中一些常用的方法：使用设置应用：打开“设置”应用（Win+I），选择“更新和安全”。在左侧菜单中选择“Windows更新”。点击“更改活动时间”或“高级选项”。在“更新选项”下拉菜单中选择“通知我但不自动下载或安装”或“从不检查更新”。通过服务管理器：打开“服务”管理器，可以通过在运行对话框中输入services.msc来打开。找
  • 安全演练有保障，专项督查促改进——记公道中学校园安全（化学实验）系列活动 公中盛传云
    近期，公道中学为了全面贯彻落实“预防为主，安全第一，综合治理”的安全工作方针，学校按照安全工作方针的要求，通过多种途径开展了以“预防演练为主，人防物防技防相结合”的主题的安全教育系列活动。11月8日，在学校校务会议上，学校党总支书记李兆兵强调，学校必须采取有力措施，不断增强教师综治安全防范意识，落实学校安全工作责任制，切实保障教师和学生的安全坚决杜绝意外事故的发生，确保校园平安稳定、教育教学工作顺
  • 第九章 肿瘤放射治疗 晨翕
    放射物理学：主要研究各种放射源的性能特点、治疗剂量学、质量控制、质量保证及辐射防护等放射生物学：主要研究机体正常组织和肿瘤组织对射线对反应及如何人为地改变这些反应对质和量。放射技术学：主要研究具体运用各种放射源及设备治疗肿瘤患者，包括射野设置、体位固定、定位、摆位操作等技术实施。临床放射肿瘤学：在临床肿瘤学的基础上，研究肿瘤放射治疗的适应证，根据病理、分期、预后确定治疗策略，综合运用放射物理、放射
  • Day9：别沦为自动化的奴隶——为自己建一座“喷泉广场” 钱塘风华
    电子设备解决了小麻烦，却制造了大麻烦。【书名】：混乱——如何成为失控时代的掌控者【作者】：蒂姆哈福德【本书总页码】：288【已读页码】：220（第七章：自动化end）2009年5月31日晚，法航447号航班在电传操作系统失效的情况下，飞行员因习惯了对电传操作系统的依赖，无法对当时的情况作出正确判断，因而也无法作出对应操作——当时的情况：飞机因为急速上升后，过于稀薄的空气密度导致飞机失速，机头抬升，
  • 公道中学举行校园安全目标责任书签订仪式 公中盛传云
    图片发自App为认真做好学校校园安全管理工作,切实将安全抓实抓细，真正落实到位，责任到人，形成齐抓共管的局面。公道中学在毓贤楼多功能教室举行了2018-2019学年校园安全目标责任书签订仪式。公道中学全体教职工近150人参加签订仪式。图片发自App会议开始，公道中学校长助理盛传云传达了《扬州市邗江区教育系统社会治安综合治理暨平安校园建设责任书》的精神及近期有关上级教育主管部门下发有关食品安全、交通
  • 演说：孩子嘴巴笨不会说话，如何提升自己的口才？#吴守立冬令营 吴守立国学智慧
    关键词：少年领袖演说班国学吴守立国学天第书院论语吴守立在现代社会，口才已是一个人综合素质和综合能力的具体体现，二十一世纪是“表达世纪”，要想在这个“表达世纪”里成人成才，“会说”“会写”必不可少，随着新课改、升学对孩子表达能力提出更高的要求，口才将是我们每个人必修课和基本功。然而，孩子嘴巴笨不会说话，如何提升自己的口才？天第书院为大家介绍以下几种方法。1、父母做孩子最佳的倾听者和沟通者在孩子天性中
  • 教师资格考试中学《教育知识与能力》知识点｜高频考点汇总 小山丘
    温馨提示：更多汇总详情留言小编哦！！！认知过程之易混知识点剖析社会中心课程论情绪——重要考点皮亚杰教你带孩子斯金纳强化规律你的心理足够强大吗?教育心理学的效应德育有规律常考人物思想之夸美纽斯中学常考教学原则孔子及《论语》中的重要教育思想教育学创立阶段人物之赫尔巴特学习策略分类知识点梳理教师资格证辨析题作答思路综合课程的类型班杜拉的学习理论马斯洛需要层次理论记忆类型的四大分类柏拉图和他的《理想国》感
  • OpenCV图像处理技术（Python）——入门 森屿_ opencv
    ©FuXianjun.AllRightsReserved.OpenCV入门图像作为人类感知世界的视觉基础，是人类获取信息、表达信息的重要手段，OpenCV作为一个开源的计算机视觉库，它包括几百个易用的图像成像和视觉函数，既可以用于学术研究，也可用于工业邻域，它于1999年由因特尔的GaryBradski启动，OpenCV库主要由C和C++语言编写，它可以在多个操作系统上运行。1.1图像处理基本操作
  • 如何重启Linux服务器？ 老男孩IT教育 gitlinux运维
    在Linux操作系统中，提供了多种方法用于重启服务器，那么Linux服务器如何重启?以下列举了常用的几种方法，希望对大家有所帮助，快来看看吧。重启Linux服务器有以下几种方法：1、使用命令行使用reboot命令reboot使用shutdown命令shutdown-rnow2、使用systemctl使用以下命令：systemctlreboot3、使用web界面大多数现代Linux发行版本都提供一个
  • 操作系统基础 怡晗★ Linuxlinux
    目录操作系统基础冯诺依曼体系结构介绍操作系统基本认知本篇文章是后面学习操作系统知识的基础操作系统基础冯诺依曼体系结构介绍冯诺依曼体系结构如下：在上图中「输入设备」和「输出设备」一般被称为计算机的外设，而「存储器」在冯诺依曼体系结构中表示「内存」输入设备一般包括：网卡、磁盘、键盘、触摸屏等输出设备一般包括：网卡、磁盘、鼠标、触摸屏、显示器（非触摸屏）等内存的作用「内存」是中央处理器与计算机其他设备的
  • 一日一神兽（第一集） yrfrds
    今年我的神兽会是什么呢？唉，别胡思乱想了，根本没有神兽，可是我睁眼一看，看见了一只梅花鹿，外部特点是：一大部分树木梅花鹿的部分背上长一对翅膀。属性是综合属性，这不可能的吧？我又揉了揉了眼睛，一看还是那只神兽哇，居然用神兽了，我找找东西，看看哪一块部分适合收他，找了一会儿，我找到了嗯，一个小方块儿我觉得这个很适合她我说收她被吸到了方块儿哩哈哈，我竟然用神兽了哈哈，现在我无人能敌了上完学校下午放学的时
  • Java序列化进阶篇 g21121 java序列化
            1.transient         类一旦实现了Serializable 接口即被声明为可序列化，然而某些情况下并不是所有的属性都需要序列化，想要人为的去阻止这些属性被序列化，就需要用到transient 关键字。
  • escape()、encodeURI()、encodeURIComponent()区别详解 aigo JavaScriptWeb
    原文：http://blog.sina.com.cn/s/blog_4586764e0101khi0.html   JavaScript中有三个可以对字符串编码的函数，分别是： escape,encodeURI,encodeURIComponent，相应3个解码函数：,decodeURI,decodeURIComponent 。 下面简单介绍一下它们的区别 1 escape()函
  • ArcgisEngine实现对地图的放大、缩小和平移 Cb123456 添加矢量数据对地图的放大、缩小和平移Engine
    ArcgisEngine实现对地图的放大、缩小和平移:  个人觉得是平移，不过网上的都是漫游，通俗的说就是把一个地图对象从一边拉到另一边而已。就看人说话吧.  具体实现: 一、引入命名空间    using ESRI.ArcGIS.Geometry;    using ESRI.ArcGIS.Controls; 二、代码实现.
  • Java集合框架概述 天子之骄 Java集合框架概述
       集合框架 集合框架可以理解为一个容器，该容器主要指映射(map)、集合(set)、数组(array)和列表(list)等抽象数据结构。 从本质上来说，Java集合框架的主要组成是用来操作对象的接口。不同接口描述不同的数据类型。   简单介绍：   Collection接口是最基本的接口，它定义了List和Set，List又定义了LinkLi
  • 旗正4.0页面跳转传值问题 何必如此 javajsp
    跳转和成功提示 a)        成功字段非空forward 成功字段非空forward，不会弹出成功字段，为jsp转发，页面能超链接传值,传输变量时需要拼接。接拼接方式list.jsp?test="+strweightUnit+"或list.jsp?test="+weightUnit+&qu
  • 全网唯一:移动互联网服务器端开发课程 cocos2d-x小菜 web开发移动开发移动端开发移动互联程序员
        移动互联网时代来了！     App市场爆发式增长为Web开发程序员带来新一轮机遇，近两年新增创业者，几乎全部选择了移动互联网项目！传统互联网企业中超过98%的门户网站已经或者正在从单一的网站入口转向PC、手机、Pad、智能电视等多端全平台兼容体系。据统计，AppStore中超过85%的App项目都选择了PHP作为后端程
  • Log4J通用配置|注意问题 笔记 7454103 DAOapachetomcatlog4jWeb
    关于日志的等级 那些去 百度就知道了！ 这几天 要搭个新框架  配置了 日志 记下来 ！做个备忘！ #这里定义能显示到的最低级别,若定义到INFO级别,则看不到DEBUG级别的信息了~! log4j.rootLogger=INFO,allLog # DAO层 log记录到dao.log 控制台 和 总日志文件 log4j.logger.DAO=INFO,dao,C
  • SQLServer TCP/IP 连接失败问题 ---SQL Server Configuration Manager darkranger sqlcwindowsSQL ServerXP
    当你安装完之后,连接数据库的时候可能会发现你的TCP/IP 没有启动.. 发现需要启动客户端协议 : TCP/IP  需要打开 SQL Server Configuration Manager... 却发现无法打开 SQL Server Configuration Manager..?? 解决方法:  C:\WINDOWS\system32目录搜索framedyn.
  • [置顶] 做有中国特色的程序员 aijuans 程序员
    从出版业说起 网络作品排到靠前的，都不会太难看，一般人不爱看某部作品也是因为不喜欢这个类型，而此人也不会全不喜欢这些网络作品。究其原因，是因为网络作品都是让人先白看的，看的好了才出了头。而纸质作品就不一定了，排行榜靠前的，有好作品，也有垃圾。 许多大牛都是写了博客，后来出了书。这些书也都不次，可能有人让为不好，是因为技术书不像小说，小说在读故事，技术书是在学知识或温习知识，有些技术书读得可
  • document.domain 跨域问题 avords document
    document.domain用来得到当前网页的域名。比如在地址栏里输入：javascript:alert(document.domain); //www.315ta.com我们也可以给document.domain属性赋值，不过是有限制的，你只能赋成当前的域名或者基础域名。比如：javascript:alert(document.domain = "315ta.com");
  • 关于管理软件的一些思考 houxinyou 管理
    工作好多看年了,一直在做管理软件,不知道是我最开始做的时候产生了一些惯性的思维,还是现在接触的管理软件水平有所下降.换过好多年公司,越来越感觉现在的管理软件做的越来越乱. 在我看来,管理软件不论是以前的结构化编程,还是现在的面向对象编程,不管是CS模式,还是BS模式.模块的划分是很重要的.当然,模块的划分有很多种方式.我只是以我自己的划分方式来说一下. 做为管理软件,就像现在讲究MVC这
  • NoSQL数据库之Redis数据库管理(String类型和hash类型) bijian1013 redis数据库NoSQL
    一.Redis的数据类型 1.String类型及操作         String是最简单的类型，一个key对应一个value，string类型是二进制安全的。Redis的string可以包含任何数据，比如jpg图片或者序列化的对象。         Set方法：设置key对应的值为string类型的value
  • Tomcat 一些技巧 征客丶 javatomcatdos
    以下操作都是在windows 环境下 一、Tomcat 启动时配置 JAVA_HOME 在 tomcat 安装目录，bin 文件夹下的 catalina.bat 或 setclasspath.bat 中添加 set JAVA_HOME=JAVA 安装目录 set JRE_HOME=JAVA 安装目录/jre 即可； 二、查看Tomcat 版本 在 tomcat 安装目
  • 【Spark七十二】Spark的日志配置 bit1129 spark
    在测试Spark Streaming时，大量的日志显示到控制台，影响了Spark Streaming程序代码的输出结果的查看(代码中通过println将输出打印到控制台上)，可以通过修改Spark的日志配置的方式，不让Spark Streaming把它的日志显示在console   在Spark的conf目录下，把log4j.properties.template修改为log4j.p
  • Haskell版冒泡排序 bookjovi 冒泡排序haskell
    面试的时候问的比较多的算法题要么是binary search，要么是冒泡排序，真的不想用写C写冒泡排序了，贴上个Haskell版的，思维简单，代码简单，下次谁要是再要我用C写冒泡排序，直接上个haskell版的，让他自己去理解吧。     sort [] = [] sort [x] = [x] sort (x:x1:xs) | x>x1 = x1:so
  • java 路径 配置文件读取 bro_feng java
    这几天做一个项目，关于路径做如下笔记，有需要供参考。 取工程内的文件，一般都要用相对路径，这个自然不用多说。 在src统计目录建配置文件目录res,在res中放入配置文件。 读取文件使用方式： 1. MyTest.class.getResourceAsStream("/res/xx.properties") 2. properties.load(MyTest.
  • 读《研磨设计模式》-代码笔记-简单工厂模式 bylijinnan java设计模式
    声明： 本文只为方便我个人查阅和理解，详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/ package design.pattern; /* * 个人理解：简单工厂模式就是IOC; * 客户端要用到某一对象，本来是由客户创建的，现在改成由工厂创建，客户直接取就好了 */ interface IProduct {
  • SVN与JIRA的关联 chenyu19891124 SVN
    SVN与JIRA的关联一直都没能装成功，今天凝聚心思花了一天时间整合好了。下面是自己整理的步骤： 一、搭建好SVN环境，尤其是要把SVN的服务注册成系统服务 二、装好JIRA，自己用是jira-4.3.4破解版 三、下载SVN与JIRA的插件并解压，然后拷贝插件包下lib包里的三个jar，放到Atlassian\JIRA 4.3.4\atlassian-jira\WEB-INF\lib下，再
  • JWFDv0.96 最新设计思路 comsci 数据结构算法工作企业应用公告
                       随着工作流技术的发展，工作流产品的应用范围也不断的在扩展，开始进入了像金融行业(我已经看到国有四大商业银行的工作流产品招标公告了)，实时生产控制和其它比较重要的工程领域，而
  • vi 保存复制内容格式粘贴 daizj vi粘贴复制保存原格式不变形
        vi是linux中非常好用的文本编辑工具，功能强大无比，但对于复制带有缩进格式的内容时，粘贴的时候内容错位很严重，不会按照复制时的格式排版，vi能不能在粘贴时，按复制进的格式进行粘贴呢？ 答案是肯定的，vi有一个很强大的命令可以实现此功能 。     在命令模式输入:set paste，则进入paste模式，这样再进行粘贴时
  • shell脚本运行时报错误：/bin/bash^M: bad interpreter 的解决办法 dongwei_6688 shell脚本
    出现原因：windows上写的脚本，直接拷贝到linux系统上运行由于格式不兼容导致 解决办法： 1. 比如文件名为myshell.sh，vim myshell.sh 2. 执行vim中的命令 : set ff?查看文件格式，如果显示fileformat=dos，证明文件格式有问题 3. 执行vim中的命令 :set fileformat=unix 将文件格式改过来就可以了，然后:w
  • 高一上学期难记忆单词 dcj3sjt126com wordenglish
    honest 诚实的；正直的 argue 争论 classical 古典的 hammer 锤子 share  分享；共有 sorrow 悲哀；悲痛 adventure 冒险 error 错误；差错 closet 壁橱；储藏室 pronounce 发音；宣告 repeat 重做；重复 majority 大多数；大半   native 本国的，本地的，本国
  • hibernate查询返回DTO对象，DTO封装了多个pojo对象的属性 frankco POJOhibernate查询DTO
          DTO-数据传输对象；pojo-最纯粹的java对象与数据库中的表一一对应。       简单讲：DTO起到业务数据的传递作用，pojo则与持久层数据库打交道。         有时候我们需要查询返回DTO对象，因为DTO
  • Partition List hcx2013 partition
    Given a linked list and a value x, partition it such that all nodes less than x come before nodes greater than or equal to x. You should preserve the original relative order of th
  • Spring MVC测试框架详解——客户端测试 jinnianshilongnian
    上一篇《Spring MVC测试框架详解——服务端测试》已经介绍了服务端测试，接下来再看看如果测试Rest客户端，对于客户端测试以前经常使用的方法是启动一个内嵌的jetty/tomcat容器，然后发送真实的请求到相应的控制器；这种方式的缺点就是速度慢；自Spring 3.2开始提供了对RestTemplate的模拟服务器测试方式，也就是说使用RestTemplate测试时无须启动服务器，而是模拟一
  • 关于推荐个人观点 liyonghui160com 推荐系统关于推荐个人观点
        回想起来，我也做推荐了3年多了，最近公司做了调整招聘了很多算法工程师，以为需要多么高大上的算法才能搭建起来的，从实践中走过来，我只想说【不是这样的】     第一次接触推荐系统是在四年前入职的时候，那时候，机器学习和大数据都是没有的概念，什么大数据处理开源软件根本不存在，我们用多台计算机web程序记录用户行为，用.net的w
  • 不间断旋转的动画 pangyulei 动画
    CABasicAnimation* rotationAnimation; rotationAnimation = [CABasicAnimation animationWithKeyPath:@"transform.rotation.z"]; rotationAnimation.toValue = [NSNumber numberWithFloat: M
  • 自定义annotation sha1064616837 javaenumannotationreflect
    对象有的属性在页面上可编辑，有的属性在页面只可读，以前都是我们在页面上写死的，时间一久有时候会混乱，此处通过自定义annotation在类属性中定义。越来越发现Java的Annotation真心很强大，可以帮我们省去很多代码，让代码看上去简洁。 下面这个例子 主要用到了 1.自定义annotation：@interface，以及几个配合着自定义注解使用的几个注解 2.简单的反射 3.枚举
  • Spring 源码 up2pu spring
    1.Spring源代码 https://github.com/SpringSource/spring-framework/branches/3.2.x 注：兼容svn检出 2.运行脚本 import-into-eclipse.bat 注：需要设置JAVA_HOME为jdk 1.7 build.gradle compileJava { sourceCompatibilit
  • 利用word分词来计算文本相似度 yangshangchuan wordword分词文本相似度余弦相似度简单共有词
    word分词提供了多种文本相似度计算方式： 方式一：余弦相似度，通过计算两个向量的夹角余弦值来评估他们的相似度 实现类：org.apdplat.word.analysis.CosineTextSimilarity 用法如下： String text1 = "我爱购物"; String text2 = "我爱读书"; String text3 =
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他