Selenium在Python-Scrapy中执行Js的替代方法是什么?

par*_*rik 4 python selenium scrapy web-scraping

我想在Python-Scrapy中执行JavaScript的功能,之前我使用的是Selenium,但是Selenium对于抓取大型网站来说太慢了.

我想知道什么是硒在Scrapy中执行js的最佳选择?

Gra*_*rus 15

Splash - 一个javascript渲染服务

Splash是一个带有HTTP API的javascript呈现服务.它是一个带有HTTP API的轻量级浏览器,使用Twisted和QT在Python中实现.

它快速,轻便且无状态,易于分发.

由正在开发Scrapy的同一家伙开发的奖励积分.