2、URL的编解码

2.1、特殊字符

url中使用的是ASCII码(8位)字符集中的字符。如东亚地区中文在url中就需要特意编码,规则是在百分号后面接上两个十六进制数字,和其在ASCII字符表中的对应位置相同。
特殊情况:
1、如常见情况不能再url中使用空格字符,当让现在先进浏览器可以自动编码如当访问http://192.168.90.162/advanced search.html 浏览器会自动http://192.168.90.162/advanced%20search.html
2、有些字符使得url非法,因为是保留字符。如斜线字符将会用来分割路径,如果使用斜线字符而不是将其作为路径,则需要转义如斜线(当然:windows下建立文件名不能包含"\/:?<>|"中的任何字符),但是linux很灵活如(touch :a;touch \

保留字符 URL编码 保留字符 url编码 保留字符
%3B 3%A
/ 2%F @ %40
& %26 ? %3F

3、不安全字符指那些虽然在URL中没有特殊意义,而可能在URL的上下文中有特殊含义的字符。如双引号在标签中分开属性和值,如果在url中包含有双引号,则浏览器解析时可能错误。此时可以用%22来编码双引号,进而解决冲突。
尽管浏览器智能解析url的编解码_第1张图片
不安全字符编码举例:
< %3C , > %3E , # %23 , % %25, ~ %7E , \ %5C 等。

2.2、urllib.parse模块url编解码方法

quote方法:对URL进行编码;
unquote: 对url进行解码
quote_plus:同quote方法,进一步将空格表示成+符号;
unquote_plus:同unquote方法,将+符号变成空格

>>> r2=quote("/~test aggin &/")
>>> r2
'/%7Etest%20aggin%20%26/'    #注意空格和&符号都已经编码了,而”/“并没有转换
>>> un_r2=unquote(r2)
>>> un_r2
'/~test aggin &/'
>>> quote("~/ test","~/")   #quote第二个参数的使用:当将"~"字符加入忽略字符列表后,再次输出就没有对”~“进行编码了。
'~/%20test'

quote_plus使用时会将”/“字符替换成%2F,并将空格字符替换成+符号,这是同quote的主要区别,如下:

>>> quote_plus("/~test aggin &/")
'%2F%7Etest+aggin+%26%2F'
>>> unquote_plus('%2F%7Etest+aggin+%26%2F')
'/~test aggin &/'

2.3、中文的编解码

http://192.168.90.162/中文.html, 现在主流浏览器chrome,IE,edge等已经能识别了。然而问题不能忽视,对于不安全的字符使用url编码总是不安全的。

>>> quote("中文编码")
'%E4%B8%AD%E6%96%87%E7%BC%96%E7%A0%81'
>>> unquote('%E4%B8%AD%E6%96%87%E7%BC%96%E7%A0%81')
'中文编码'

2.4、查询参数的编码

http两种数据提交方式:get和post。都需要提交查询参数和其值。特别get方法中还会将这种值显示在地址栏中如:
https://www.baidu.com/s?wd=url%E7%BC%96%E7%A0%81&rsv_spt=1&rsv_iqid=0xb6a3f6f50003c26a&issp=1&f=8&rsv_bp=1&rsv_idx=2&ie=utf8&rqlang=cn&tn=baiduhome_pg&rsv_enter=0&oq=url%25E7%25BC%2596%25E7%25A0%2581&rsv_t=a3a7nKjz1kdhBSmGXcoRFeCicwee05LR5H9nq5W5GZWVKwR×××WAjMl98d3Rfvhq%2FCJb&rsv_pq=8532218200044be3

>>> unquote("url%E7%BC%96%E7%A0%81")   ?wd=url%E7%BC%96%E7%A0%81会将值显示在地址栏中
'url编码'

对查询参数进行编码的方法:urlencode由urllib.parse模块提供该方法
功能:将查询的参数值对返回成URL编码的新式。参数值对可以是一系列的字典数据。

>>> urlencode([('key1','value1'),('key2','value2')])
'key1=value1&key2=value2'
>>> help(urlencode)
Help on function urlencode in module urllib.parse:

说明1、查询参数为一个(keyword,value)的列表,这里列表的长度为2..注意参数格式列表里面套元组
2、urlencode将参数值对列表编码成了一个URL字符串,查询参数顺序和列表中一致

>>> urlencode([("key1","urlencode编码")])
'key1=urlencode%E7%BC%96%E7%A0%81'

urlencode方法还可以接受一个可选参数,用来对输入查询参数中的数据进行控制。默认值False。即当查询数据(keyword,value)列表中的value也为列表时,将其使用整个quote_pluse方法进行编码

>>> urlencode([("keyword",("value1","value2","value3"))])
'keyword=%28%27value1%27%2C+%27value2%27%2C+%27value3%27%29'
>>> urlencode([("keyword",("value1","value2","value3"))],True) 但当参数为True时,会将value列表中的每个值都和keyword组成一个查询参数值对。
'keyword=value1&keyword=value2&keyword=value3'