小编use*_*646的帖子

Scrapy hxs.select()不选择所有结果

我正试图从这里开始捣蛋.

目前只是尝试使用以下蜘蛛记录结果:

def parse(self, response):         
   log.start("LogFile.txt", log.DEBUG);

   hxs = HtmlXPathSelector(response)
   sites = hxs.select('//div[@class="fb_day_type_wrapper"]')

   items = []
   for site in sites:
       siteAddress = urlparse.urljoin(response.url, site.extract())
       self.log('Found category url: %s' % siteAddress)
Run Code Online (Sandbox Code Playgroud)

这仅记录条目:此市场目前不可用....不包含赔率的其他元素.

我试过几个不同的选择器没有运气.看起来,一旦我尝试进入元素内部,div[@class="fb_day_type_wrapper"]我什么都没有回来.我使用scrapy shell有相同的结果.

python scrapy web-scraping

4
推荐指数
1
解决办法
1484
查看次数

标签 统计

python ×1

scrapy ×1

web-scraping ×1