爬虫小练习4

请爬取网页(http://www.volleyball.world/en/vnl/2018/women/results-andranking/round1)上的数据(包括 TEAMS and TOTAL, WON, LOST of MATCHES)
提示:在处理时可以用已学的方法将每一项需要的内容(如USA 和 15)单独解析
出来,但这种做法将有联系的数据打散了,较好的做法是将每个 TEAM的相关数据按 组解析出来。但是由于包含这 4 项信息的源代码(请自行观察)分在多行并且行首有 多个空格,因此在处理时在构造正则表达式时要把换行时的空白字符表示出来(用\s+ 可表示多个空白字符,包括换行符和空格)。


import requests,re


url='http://www.volleyball.world/en/vnl/2018/women/results-and-ranking/round1'

def crawler(url):
    try:
        r = requests.get(url)
    except requests.exceptions.RequestException as err:
        return err
    r.encoding=r.apparent_encoding
    pattern = re.compile('href="/en/vnl/2018/women/teams/.*?">(.*?)\s+\s+\s+(.*?)\s+(.*?)\s+(.*?)')
    p = re.findall(pattern,r.text)
    return p

result = crawler(url)
print(result)
    

你可能感兴趣的:(python3网络爬虫开发实战)