注册
登录
互助问答 » 对于网站爬的太快了,然后本来1000条数据的网页只抓到了100条,有什么办法避免
我要提问 / 分享返回列表
查看：388 | 回复：5
九尾
对于网站爬的太快了,然后本来1000条数据的网页只抓到了100条,有什么办法避免
发表于 2022/7/13 12:36:10
楼主

我用的是xpath

九尾
发表于 2022/7/13 12:40:02
沙发

偶尔就有几个

我在次尝试的时候就是1000了

概率事件

Pascal
发表于 2022/7/13 12:43:08
板凳

sleep

九尾
发表于 2022/7/13 12:44:12
4楼

怎么用

应该说用在哪

丛雨丛雨从
发表于 2022/7/13 12:49:09
5楼

用在每个for循环结尾

九尾
发表于 2022/7/13 12:52:09
6楼

好的，多谢

返回列表
立即注册站大爷用户，免费试用全部产品
立即注册站大爷用户，免费试用全部产品

快速咨询热线：

024-31823261

  • 国家高新技术企业证书编号：GR202321001563

  • 增值电信经营许可证： 辽B2-20180026

  • 互联网虚拟专用网业务许可证：B1-20181940

  • 公司地址：沈阳市浑南区上深沟村沈阳国际软件园F7座

产品

支持

文档

关于

声明：本站不搜集数据不存储数据，也不买卖数据，所有资源仅用作数据传输通道。禁止利用本平台资源从事任何违反本国（地区）法律法规的活动，用户所有操作行为均有日志存档并保留6个月。
站大爷 - 专业的大数据基础服务平台 Copyright@2012-2024 | 辽B2-20180026