所以我编写了一个蜘蛛,它从网页中提取某些所需的链接,并将URL,链接文本和其他信息(不一定包含在<a>标记本身中)放入每个链接的项目中.
我应该如何将此项目传递给另一个抓取该项目中提供的URL的蜘蛛？
这个问题已被多次询问.以下是本网站上回答您问题的一些链接.有些人直接回答它,即将项目传递给另一个函数,但你可能会意识到你不需要那样做,所以其他方法被链接到显示什么是可能的.
Scrapy - 解析页面以提取项目 - 然后关注并存储项目URL内容
| 归档时间： |
|
| 查看次数： |
1398 次 |
| 最近记录： |