tom*_*ith 4 python distributed web-crawler scrapy
也许不是正确的发布地点.但是,无论如何我还是要去尝试!
我有几个我创建的测试python解析脚本.他们的工作足以让我测试我正在做的事情.
但是,我最近遇到了用于网页抓取的python框架Scrapy.我的应用程序在分布式进程中运行,跨多个服务器的测试平台.我正在努力理解scrapy,看看它是否比我正在做的事情带来好处.
所以,如果可能的话,我真的想和一些基于/或使用scrapy的人交谈.
| 归档时间： |
|
| 查看次数： |
1092 次 |
| 最近记录： |