我正在尝试制作一个需要从多个网站抓取大量数据的应用程序.我尝试使用Ruby来抓取网站,但像Mechanize这样的宝石似乎只是抓取静态页面而不是动态内容.关于这个项目中我应该使用哪种语言或任何其他语言,我有几个问题(我正在考虑使用Node,因为应用程序中的很多元素必须是实时的).
提前致谢!
ruby screen-scraping node.js web-scraping ruby-on-rails-3
node.js ×1
ruby ×1
ruby-on-rails-3 ×1
screen-scraping ×1
web-scraping ×1