我找不到解决以下问题的方法.我正在使用Scrapy(最新版本),我正在尝试调试蜘蛛.使用scrapy shell https://jigsaw.w3.org/HTTP/300/301.html- >它不遵循重定向(它使用默认的蜘蛛来获取数据).如果我正在运行我的蜘蛛它跟随301 - 但我无法调试.
scrapy shell https://jigsaw.w3.org/HTTP/300/301.html
如何使shell遵循301以允许调试最终页面?
python scrapy web-scraping scrapy-shell
python ×1
scrapy ×1
scrapy-shell ×1
web-scraping ×1