python使用time.sleep设置时间间隔
- 更新时间:2021-06-22 11:04:19
- 编辑:杨香薇
本站收集了一篇相关的编程文章,网友糜成益根据主题投稿了本篇教程内容,涉及到Python相关内容,已被681网友关注,涉猎到的知识点内容可以在下方电子书获得。
参考资料
- Python编程基础与科学计算 PDF 电子书 / 56.9 MB / 李增刚、戴光昊、廖晖 推荐度:
- Python程序开发(中级) PDF 电子书 / 89.7 MB / 中慧云启科技集团有限公司 推荐度:
- OpenCV算法精解:基于Python与C++ PDF 电子书 / 84 MB / 张平 推荐度:
- Python机器学习算法 PDF 电子书 / 30.1 MB / 赵志勇 推荐度:
- 《预测分析:Python语言实现》源码 配套资源 / 25.18 MB / 约瑟夫?巴布科克 推荐度:
正文内容
我们整理一篇关于《python使用time.sleep设置时间间隔》技术文章,实例用法很详细,重新编辑了一下发到本站,希望大家能有所收获。
1、说明
由于原本爬虫可能会对对方网站造成访问负荷压力,因此这种预防措施不仅能在一定程度上防止被封,而且能减轻网站的访问压力。假如访问太频繁,一些网站会直接关闭IP,让你再也不能访问它的数据。因此,为了安全起见,最好设定睡眠时间。
爬取时只需要添加到循环中。
2、实例
import time import random time.sleep(random.randint(5,10)) #具体的随机数,可以自行设置,太小的话,作用不大,太大的话,代码运行时间会加长;
许多站点的反爬虫机制都设定了访问间隔时间,一个IP如果在短时间内超过指定次数就会进入冷却CD,因此,除了转换IP和user_agent之外,是可以设定访问间隔时间解决的。
以上就是python使用time.sleep设置时间间隔的方法,希望对大家有所帮助。
相关教程
-
python os.chdir()定义及作用分析(实例解析)
介绍了pythonos.chdir()的作用以及其的定义
发布时间:2019-07-11
-
使用python和pygame绘制繁花曲线的方法
本篇文章主要介绍了使用python和pygame绘制繁花曲线的方法,小编觉得挺不错的,现在分享给大家,也给大家做个参考。一起跟随小编过来看看吧
发布时间:2019-08-26