刮网站的最佳方法或工具是什么？

Question

在我开始编写自己的最佳工具/方法来抓取网站之前,我需要抓住(经过批准)网站,这既快速(多线程)又易于学习？

Answer 1

看看Lee Holmes 最近的这篇博客文章。他使用 Powershell 和HTML Agility Pack编写了一个非常酷的屏幕抓取工具。