爬虫 (反爬)

再爬虫过程中,我们爬着爬着,他就会阻止你浏览页面,说明对方已经在页面上设置了反爬。

而我,今天用 装饰器的方法,也制定了一个反爬!

下面 ,则是详解代码

def limit(seconds=1):
# 定义内部方法
def rate_limit(func):
def func_limit(request):
# 设置当前时间
now =time.time()
# 获取首次来访时间
request_time = request.session.get('req_time',0)
# 做减法
in_time = int(now) - request_time

# 判断访问者在一秒内来了不止一次
if in_time < seconds:
# 抛出异常
return HttpResponse('你是爬虫,不要来了',status=403)
else:
# 来的时间点存储
request.session['req_time']=time.time()
# 让访问者继续访问
ret = func(request)
return ret
return func_limit
return rate_limit

转载于:https://www.cnblogs.com/lyp0626/p/10295266.html

你可能感兴趣的:(爬虫)