小编Pix*_*ist的帖子

Scrapy - 301重定向在shell中

我找不到解决以下问题的方法.我正在使用Scrapy(最新版本),我正在尝试调试蜘蛛.使用scrapy shell https://jigsaw.w3.org/HTTP/300/301.html- >它不遵循重定向(它使用默认的蜘蛛来获取数据).如果我正在运行我的蜘蛛它跟随301 - 但我无法调试.

如何使shell遵循301以允许调试最终页面?

python scrapy web-scraping scrapy-shell

3
推荐指数
1
解决办法
1340
查看次数

标签 统计

python ×1

scrapy ×1

scrapy-shell ×1

web-scraping ×1