python 爬虫前奏五 webdriver中的等待
在上一章python 爬虫前奏四 Selenium库的使用中简单的提过一句webdriver等待，但是这个是需要详细了解的
1、强制等待sleep
import time
sleep(2) #等待2秒由python的time包提供，但是使用缺点很大，因为sleep是整个进程休眠阻塞
2、隐式等待:implicitly_wait()
driver.implicitly_wait(10) #隐式等待10秒由webdriver提供的方法，一旦设置，这个隐式等待会在WebDriver对象实例的整个生命周期起作用，它不针对某一个元素，是全局元素等待，即在定位元素时，需要等待页面全部元素加载完成，才会执行下一个语句。如果超出了设置时间的则抛出异常。
缺点：当页面某些js无法加载，但是想找的元素已经出来了，它还是会继续等待，直到页面加载完成（浏览器标签左上角圈圈不再转），才会执行下一句。某些情况下会影响脚本执行速度。
3、显示等待:WebDriverWait()
from selenium.webdriver.support.wait import WebDriverWait
WebDriverWait(driver,timeout,poll_frequency=0.5,ignored_exceptions=None)
#driver：浏览器驱动
#timeout：最长超时时间，默认以秒为单位
#poll_frequency：检测的间隔步长，默认为0.5s
#ignored_exceptions：超时后的抛出的异常信息，默认抛出NoSuchElementExeception异常。- 与until()或者until_not()方法结合使用
主要的意思就是：程序每隔xx秒看一眼，如果条件成立了，则执行下一步；否则继续等待，直到超过设置的最长时间，然后抛出TimeoutException异常。
WebDriverWait(driver,10).until(method，message="")
调用该方法提供的驱动程序作为参数，直到返回值为True
WebDriverWait(driver,10).until_not(method，message="")
调用该方法提供的驱动程序作为参数，直到返回值为False
在设置时间（10s）内，等待后面的条件发生。如果超过设置时间未发生，则抛出异常。在等待期间，每隔一定时间（默认0.5秒)，调用until或until_not里的方法，直到它返回True或False.
until(method,message=’’) 的注释：Calls the method provided with the driver as an argument until the return value is not False 将驱动提供的方法作为参数调用，直到返回值不为False；
- WebDriverWait与expected_conditions结合使用
from selenium.webdriver.support import expected_conditions as EC
from selenium.webdriver.common.by import By
wait = WebDriverWait(driver,10,0.5)
element =waite.until(EC.presence_of_element_located((By.ID,"kw"),message="")
# 此处注意，如果省略message=“”，则By.ID外面是两层()
expected_conditions类提供的预期条件判断的方法
| 方法 | 说明 |
|---|---|
| title_is | 判断当前页面的 title 是否完全等于（==）预期字符串，返回布尔值 |
| title_contains | 判断当前页面的 title 是否包含预期字符串，返回布尔值 |
| presence_of_element_located | 判断某个元素是否被加到了 dom 树里，并不代表该元素一定可见 |
| visibility_of_element_located | 判断元素是否可见（可见代表元素非隐藏，并且元素宽和高都不等于 0） |
| visibility_of | 同上一方法，只是上一方法参数为locator，这个方法参数是 定位后的元素 |
| presence_of_all_elements_located | 判断是否至少有 1 个元素存在于 dom 树中。举例：如果页面上有 n 个元素的 class 都是’wp’，那么只要有 1 个元素存在，这个方法就返回 True |
| text_to_be_present_in_element | 判断某个元素中的 text 是否 包含 了预期的字符串 |
| text_to_be_present_in_element_value | 判断某个元素中的 value 属性是否包含 了预期的字符串 |
| frame_to_be_available_and_switch_to_it | 判断该 frame 是否可以 switch进去，如果可以的话，返回 True 并且 switch 进去，否则返回 False |
| invisibility_of_element_located | 判断某个元素中是否不存在于dom树或不可见 |
| element_to_be_clickable | 判断某个元素中是否可见并且可点击 |
| staleness_of | 等某个元素从 dom 树中移除，注意，这个方法也是返回 True或 False |
| element_to_be_selected | 判断某个元素是否被选中了,一般用在下拉列表 |
| element_selection_state_to_be | 判断某个元素的选中状态是否符合预期 |
| element_located_selection_state_to_be | 跟上面的方法作用一样，只是上面的方法传入定位到的 element，而这个方法传入 locator |
| alert_is_present | 判断页面上是否存在 alert |
- 显示等待,自定义等待条件
#设置等待
wait = WebDriverWait(driver,10,0.5)
#使用匿名函数
wait.until(lambda diver:driver.find_element_by_id('kw'))