我正试图从这里开始捣蛋.
目前只是尝试使用以下蜘蛛记录结果:
def parse(self, response):
log.start("LogFile.txt", log.DEBUG);
hxs = HtmlXPathSelector(response)
sites = hxs.select('//div[@class="fb_day_type_wrapper"]')
items = []
for site in sites:
siteAddress = urlparse.urljoin(response.url, site.extract())
self.log('Found category url: %s' % siteAddress)
Run Code Online (Sandbox Code Playgroud)
这仅记录条目:此市场目前不可用....不包含赔率的其他元素.
我试过几个不同的选择器没有运气.看起来,一旦我尝试进入元素内部,div[@class="fb_day_type_wrapper"]我什么都没有回来.我使用scrapy shell有相同的结果.