python使用time.sleep设置时间间隔示例

说明

由于原本爬虫可能会对对方网站造成访问负荷压力。

1、这种预防措施不仅能在一定程度上防止被封,而且能减轻网站的访问压力。

假如访问太频繁,一些网站会直接关闭IP,让你再也不能访问它的数据。

2、为了安全起见,最好设定睡眠时间。爬取时只需要添加到循环中。

实例

import time
import random
time.sleep(random.randint(5,10))
#具体的随机数,可以自行设置,太小的话,作用不大,太大的话,代码运行时间会加长;

许多站点的反爬虫机制都设定了访问间隔时间,一个IP如果在短时间内超过指定次数就会进入冷却CD,因此,除了转换IP和user_agent之外,是可以设定访问间隔时间解决的。

说明1、Tkinter模块是Python的标准TkGUI工具包的接口。2、Tk和Tkinter可以在大多数Unix平台下使用,也可以应用于Windows和Macintosh系统。Tk8.0后续版本可 ...