注册
登录
查看:495 | 回复:3
冰履踏青云
两个headers但是parse只执行了一次,这种有知道是啥原因的吗?
发表于 2021/9/10 13:21:11
楼主

大家好,请教一个问题,我用scrapy 框架重写start_requests方法,把不同用户的cookie放到请求头里面然后再yield出去,我这里有两个headers但是parse只执行了一次,这种有知道是啥原因的吗?

QQ图片20210910153652.png

闪现单杀丈母娘
发表于 2021/9/10 13:24:20
沙发

两个请求一样的话yield加上参数dont_filter=False

闪现单杀丈母娘
最佳答案 发表于 2021/9/10 13:25:25
板凳

dont_filter=True

冰履踏青云
发表于 2021/9/10 13:27:19
4楼

多谢大佬,卡了一天多了

立即注册站大爷用户,免费试用全部产品
立即注册站大爷用户,免费试用全部产品