前端需要了解的计算机网络知识

概述

• 七层网路协议

  • 物理层 -> 数据链路层 -> 网络层 -> 传输层 -> 会话层 -> 表示层 -> 应用层

• http和tcp

  • http是应用层协议，tcp是传输层协议
  • 常见的应用层协议还包括：telnet，ssh，smtp，pop，ssl/tls，mime
    常见传输层协议还有：udp，sctp

Web和HTTP

HTTP概况

• HTTP服务器并不保存关于客户的任何信息，因此HTTP是一个无状态协议(stateless protocol)

非持续连接和持续连接

• 采用非持续连接的http是每个tcp最多允许传输一个对象

HTTP报文格式

• HTTP请求报文

  • 请求行=方法+sp+URL+sp+版本+cr+lf

    • GET /somedir/page.html HTTP/1.1

  • 首部行=首部字段名+sp+值+cr+lf

    • Host:www.someschool.edu
    • Connection:close
    • User-agent:Mozilla/5.0
    • Accept-language:fr
  • 空行=cr+lf
  • 实体主体

• HTTP响应报文

  • 状态行=版本+sp+状态码+sp+短语+cr+lf

    • HTTP/1.1 200 OK

  • 首部行=首部字段名+sp+值+cr+lf

    • Connection:close
    • Date:Tue,09 Aug 2011 15:44:04 GMT
    • Server:Apache/2.2.3 (CentOS)
    • Last-Modified:Tue,09 Aug 2011 15:11:03 GMT
    • Content-Length:6821
    • Content-Type:text/html
  • 空行=cr+lf
  • 实体主体

http 状态码

• 101 websocket 双向通信
• 200 成功
• 204 没有响应体
• 206 断点续传
• 301 永久重定向
• 302 临时重定向
• 304 缓存 只能服务端设置
• 401 没登录没有权限
• 403 登录后没有权限
• 404 没有资源
• 405 请求方法不存在或不支持
• 502 负载均衡

发送请求的方式

• 浏览器 默认get请求
• postman
• 命令行 mac curl

管线化

• 管线化不需要等待上一次请求得到响应就可以执行下一次请求，实现并行发送请求。只有GET和HEAD请求可以进行管线化，而POST有所限制

请求方法 RestfulApi 根据不同的动作 做对应的处理

• get 获取资源
• post 新增资源
• put 上传文件 修改(restful)
• delete 删除资源
• options 跨域出现 复杂请求时出现 仅是get/post都是简单请求 但加上自定义头header就会变成复杂请求

用户与服务器交互：cookie

• cookie组件

  • 在http响应报文中的一个cookie首部行
  • 在http请求报文中的一个cookie首部行
  • 在用户端系统中保留有一个cookie文件，并由用户的浏览器进行管理
  • 位于Web站点的一个后端数据库

• cookie安全性

  • cookie 是存放在浏览器上的 服务器可以设置 每次请求时都会带上cookie
  • cookie 不安全 不能存放敏感信息
  • session 服务端 (基于cookie) 服务器的内存中，存到redis数据库

Web缓存

• Web缓存器(Web cache)也叫代理服务器(proxy server)，它能够代表初始web服务器来满足http请求的网络实体

• http缓存

  • 强制缓存

    • Cache-Control && Expires

  • 对比缓存

    • Last-Modified & If-Modified-Since
    • ETag & If-None-Match

• Cache-Control

  - private 客户端可以缓存
  - public 客户端和代理服务器都可以缓存
  - max-age=60 缓存内容将在60s后失效
  - no-cache 需要使用对比缓存验证数据，强制向源服务器再次验证(没有强制缓存)
  - no-store 所有内容都不会缓存，强制缓存和对比缓存都不会触发(不缓存)
  

DNS

• DNS是域名解析系统 Domain Name System

• DNS工作原理

  • 分布式层次数据库

    • 根DNS服务器
    • TLD顶级域(DNS)服务器 com org edu
    • 权威DNS服务器
    • 本地DNS服务器与三个服务器的查询关系 从请求主机向本地DNS服务器发出的查询是递归查询，从本地DNS服务器向其他三种服务器查询为迭代查询

  • DNS缓存

    • 在一个请求链中，当DNS服务器缓存了一台主机名/IP地址对，另一个对相同主机名的查询就能够提供所要求的IP地址，本地域名服务器一般会缓存顶级域名服务器的映射

• DNS记录和报文

  • 资源记录(Resource Record,RR)是一个包含了(Name,Value,Type,TTL)的四元组

  • DNS报文

    • 12字节

      • 标识符
      • 标志
      • 问题数
      • 回答RR数
      • 权威RR数
      • 附加RR数

    • 查询的名字和类型自窜

      • 问题(问题的变量数)

    • 对查询的响应中的RR

      • 回答(资源记录的变量数)

    • 权威服务器的记录

      • 权威(资源记录的变量数)

    • 可被使用的附加"有帮助"的信息

      • 附加信息(资源记录的变量数)

• DDos攻击

  • 分布式拒绝服务(DDos)带宽洪泛攻击

TCP连接

TCP报文段结构

• 源端口号+目的端口号
• 序号
• 确认号
• 首部长度+保留未用+URG+ACK+PSH+RST+SYN+FIN+接收窗口
• 因特网校验和+紧急数据指针
• 选项
• 数据

TCP连接管理（三次握手）

• 第一步：客户端的TCP首先向服务器端的TCP发送一个特殊的TCP报文段
• 第二步：一旦包含TCP SYN报文段的IP数据报到达服务器主机(假设它的确到达了)，服务器会从该数据包中提取出TCP SYN报文段，为该TCP连接分配TCP缓存和变量，并向该客户TCP发送允许连接的报文段
• 第三步：在收到SYNACK报文段后，客户也要给该连接分配缓存和变量

IP地址

IPv4 vs IPv6

• IPv4数据报格式

  • 版本(0-4)+首部长度(4-8)+服务类型(8-16)+数据报长度(16-31)
  • 16比特标识(0-16)+标志(16-19)+13比特片偏移(19-31)
  • 寿命TTL(0-8)+上层协议(8-16)+首部检验和(16-31)
  • 32比特源IP地址
  • 32比特目的IP地址
  • 选项(如果有的话)
  • 数据

• IPv6数据报格式

  • 版本(0-4)+流量类型(4-12)+流标签(12-31)
  • 有效载荷长度(0-16)+下一个首部(16-24)+跳限制(24-31)
  • 源地址(128比特)
  • 目的地址(128比特)
  • 数据

IPV4编址

• 子网：不跨越路由器的路由器接口和主机接口就形成一个子网
• 子网掩码：IP地址为某个子网分配的一个223.1.1.0/24的地址，这种/24的记法，称为子网掩码(network mask)，指示了32比特中的最左侧24比特定义了子网地址

class	NetIDs	Blocks
A	10	1
B	172.16-172.31	16
C	192.168.0-192.168.255	256

CDN

• CDN操作

  • 当用户主机中的一个浏览器指令检索一个特定的视频(由URL标识)时，CDN必须截获该请求，以便能够确定此时是混合用于该客户的CDN服务器集群以及将客户的请求重定向到该集群的某台服务器

• 集群选择策略

  • 任何CDN部署，其核心是集群选择策略(cluster selection strategy)，即动态地将客户定向到CDN中服务器集群或数据中心的机制。

  • 常见策略：

    • 周期性实时测量；IP任播(客户与CDN服务器匹配)

网络安全

密码学基础

• 对称密钥密码机制

  • 对称密钥系统(symmetric key system) 双方密钥是相同的并且是秘密的

  • 块密码 将要加密的报文处理成k比特的块

    • DES(Data Encrypiton Standard) 数据加密标准
    • AES(Advanced Encryption Standard) 高级加密标准

• 公开密钥系统

  • 公开密钥系统(public key system) 使用一对密钥：一个密钥为双方都知道，另一个密钥只有一方知道

  • RSA算法(Ron、Adi、Leonard三个人名)

    • 大数分解和素性检测

• 密码散列函数

  • MD5散列算法

    • 填充->添加->初始化累加器->循环
  • SHA-1(Security Hash Algorithm)

• SSL

  • SSL(Secure Socket Layer) 安全套接字层

  • SSL握手

    • 1）客户发送它支持的密码算法的列表，连通一个客户的不重数
    • 2）从该列表中服务器选择一种对称算法，一种公钥算法和一种MAC算法，并把选择以及证书和一个服务器不重数返回给客户
    • 3）客户验证该证书，提取服务器公钥，生成一个前主密钥(Pre-Master Secret)，用服务器的公钥加密该前主密钥，并将加密的PMS发送给服务器
    • 4）使用相同的密钥导出函数，客户和服务器独立地从PMS和不重数中计算主密钥(Master Secret)，将该MS切片申城两个密码和两个MAC密钥
    • 5）客户发送所有握手报文的一个MAC
    • 6）服务器发送所有握手报文的一个MAC