相关疑难解决方法(0)

如何使用node.js抓取包含动态内容的页面?

我试图刮一个网站,但我没有得到一些元素,因为这些元素是动态创建的.

我在node.js中使用cheerio,我的代码在下面.

var request = require('request');
var cheerio = require('cheerio');
var url = "http://www.bdtong.co.kr/index.php?c_category=C02";

request(url, function (err, res, html) {
    var $ = cheerio.load(html);
    $('.listMain > li').each(function () {
        console.log($(this).find('a').attr('href'));
    });
});
Run Code Online (Sandbox Code Playgroud)

此代码返回空响应,因为页面加载时<ul id="store_list" class="listMain">为空.

内容尚未附加.

如何使用node.js获取这些元素?如何使用动态内容抓取页面?

javascript web-crawler node.js phantomjs

22
推荐指数
3
解决办法
2万
查看次数

标签 统计

javascript ×1

node.js ×1

phantomjs ×1

web-crawler ×1