Jsoup无法从网页上获取完整内容[没有错误/异常,但是错过了一些内容]

Question

我正在尝试使用JSOUP从以下页面获取内容:

http://www.exchangeandmart.co.uk/used-cars-for-sale

但它不会获取id = results的div,即使从浏览器打开相同的链接时它是可见的.请帮我

Java代码:

Connection connection = Jsoup.connect("http://www.exchangeandmart.co.uk/used-cars-for-sale");
Document doc = connection.get();
System.out.println(doc.getElementById("results")); // prints null

注意:下载页面时没有例外或错误.只有页面中的某些内容丢失.我在控制台上打印了整个文档System.out.println(doc);,它与我在浏览器中查看的页面完全不同.

Answer 1

Document doc = Jsoup.connect("http://www.exchangeandmart.co.uk/used-cars-for-sale").userAgent("Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/535.2 (KHTML, like Gecko) Chrome/15.0.874.120 Safari/535.2").get();

现在,页面应呈现为从PC上的Chrome访问.