谷歌应用引擎支持scrapy吗?

Zha*_*bek 9 google-app-engine scrapy

它具有以下依赖关系: - Twisted 2.5.0,8.0或更高版本 - lxml或libxml2(如果使用libxml2,强烈建议使用2.6.28或更高版本) - simplejson - pyopenssl

Woo*_*ble 8

你不能在App Engine上使用C扩展,它排除了lxml和(我相信)libxml2和pyopenssl.

我怀疑Twisted在App Engine沙箱中所做的大部分工作是否可行; 你不能直接打开套接字或产生线程.

编辑(2013年1月):Python 2.7运行时确实包含一些C扩展,包括lxml.但是,仍然无法使用Google未在运行时提供的C扩展; 目前最有可能的scrapy仍无法使用.

  • 您也可以尝试使用[URL Fetch API](http://code.google.com/appengine/docs/python/urlfetch/)和[BeautifulSoup](http://www.crummy.com/software/ BeautifulSoup /). (3认同)