简单介绍HTTP请求、响应和 curl 命令

超文本传输协议（HTTP，HyperText Transfer Protocol)是互联网上应用最为广泛的一种网络协议。

我们在浏览器的地址栏里输入的网站地址叫做URL (Uniform Resource Locator，统一资源定位符)。就像每家每户都有一个门牌地址一样，每个网页也都有一个Internet地址。当你在浏览器的地址框中输入一个URL或是单击一个超级链接时，URL就确定了要浏览的地址。浏览器通过超文本传输协议(HTTP)，将Web服务器上站点的网页代码提取出来，并翻译成漂亮的网页。

HTTP 的作用就是指导浏览器和服务器如何进行沟通。

请求示例

请求最多包含四部分，最少包含三部分。

请求的格式

• 1 动词 路径 协议/版本
• 2 Key1: value1
• 2 Key2: value2
• 2 Key3: value3
• 2 Content-Type: application/x-www-form-urlencoded
• 2 Host: www.baidu.com
• 2 User-Agent: curl/7.54.0
• 3
• 4 要上传的数据

下面是请求示例

GET / HTTP/1.1
Host: www.baidu.com
Connection: keep-alive
Cache-Control: max-age=0
Upgrade-Insecure-Requests: 1
User-Agent: Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,image/apng,/;q=0.8
Accept-Encoding: gzip, deflate, br
Accept-Language: zh-CN,zh;q=0.9
Set-Cookie: BDORZ=27315; max-age=86400; domain=.baidu.com; path=/

响应的格式

• 1 协议/版本号 状态码 状态解释
• 2 Key1: value1
• 2 Key2: value2
• 2 Content-Length: 17931
• 2 Content-Type: text/html
• 3
• 4 要下载的内容

下面是响应部分

GET / HTTP/1.1
Host: www.baidu.com
User-Agent: curl/7.60.0
Accept: /
Frank: xxx

{ [5 bytes data]
< HTTP/1.1 200 OK
< Accept-Ranges: bytes
< Cache-Control: private, no-cache, no-store, proxy-revalidate, no-transform
< Connection: Keep-Alive
< Content-Length: 2443
< Content-Type: text/html
< Date: Tue, 20 Nov 2018 07:28:00 GMT
< Etag: "58860402-98b"
< Last-Modified: Mon, 23 Jan 2017 13:24:18 GMT
< Pragma: no-cache
< Server: bfe/1.0.8.18
< Set-Cookie: BDORZ=27315; max-age=86400; domain=.baidu.com; path=/
<
{ [2443 bytes data]

• Connection #0 to host www.baidu.com left intact

GET 请求和 POST 请求对应的响应可以一样，也可以不一样

下面教大家如何用Chrome开发者工具查看 HTTP 请求内容

打开 Network
地址栏输入网址
在 Network 点击，查看 request，点击「view source」

image.png

image.png

image.png

image.png

curl命令

curl命令是一个利用URL规则在命令行下工作的文件传输工具。它支持文件的上传和下载，所以是综合传输工具，但按传统，习惯称curl为下载工具。作为一款强力工具，curl支持包括HTTP、HTTPS、ftp等众多协议，还支持POST、cookies、认证、从指定偏移处下载部分文件、用户代理字符串、限速、文件大小、进度条等特征。做网页处理流程和数据检索自动化，curl可以祝一臂之力。

curl -X POST -d "1234567890" -s -v -H "Frank: xxx" -- "https://www.baidu.com"

上传时候我们要加POST参数，以及上传的信息，而后面的网址是我们要请求的服务器，在我们发起请求之后，在命令行窗口中可以看到请求和响应。