编写一个与浏览器交互的简单Web爬虫(Java)

Question

我需要创建一个自动化流程(最好使用Java),它将:

1. 使用特定网址打开浏览器.
2. 使用指定的用户名和密码登录.
3. 按照页面上的其中一个链接.
4. 刷新浏览器.
5. 登出.

这基本上是为了收集一些统计数据进行分析.每次用户跟踪链接时,都会为该特定用户生成一堆数据并保存在数据库中.我需要做的是,使用大约10个假用户,每5-15分钟ping一次页面.

你能谈谈简单的做法吗？必须有一个替代无尽的登录 - 刷新 - 注销手动过程...

Answer 1

试试Selenium.