如何使用这些Node模块通过文件或URL接受HTML,然后输出JSON作为现有HTML元素的验证?

Bij*_*jan 5 javascript json html-parsing node.js

基本上我需要做的是获取一个本地grader.js文件,然后在命令行使用它来输入HTML,然后将输出JSON数据到控制台以验证是否存在多个HTML元素.用法看起来像这样:

./grader.js --checks checks.json --file index.html
./grader.js --checks checks.json --url http://google.com
Run Code Online (Sandbox Code Playgroud)

使用的Node模块是Commander(用于在命令行工作),Cheerio(用于HTML)和Restler(用于从URL获取HTML).

checks.json文件是简单的,它的根本要求,检查是否有一些简单的HTML元素的存在,以查明他们是否在页面上存在:

["h1",
 ".navigation",
 ".logo",
 ".blank",
 ".about",
 ".heading",
 ".subheading",
 ".pitch",
 ".video",
 ".thermometer",
 ".order",
 ".social",
 ".section1",
 ".section2",
 ".faq",
 ".footer"]
Run Code Online (Sandbox Code Playgroud)

grader.js文件是事情变得更加复杂.以下代码实际上是有用的,因为它采用命令行参数,并指示HTML元素是否存在的true或false值.但是在底部添加URL检查后它无法正常工作.我的checkURL功能有问题以及我使用底部的Commander代码实现它的方式.即使真值和假值依赖于我使用的HTML文件/ URL是正确的,我最终也会将两个检查都吐出到控制台,即使我只想检查文件或URL,而不是两者.我对此很新,所以我很惊讶它的功能完全正常.它可能与默认值有关,但是当我尝试进行这些更改时,checkURL函数似乎会崩溃.在此先感谢您的帮助,我真的很感激.

#!/usr/bin/env node
var fs = require('fs');
var program = require('commander');
var cheerio = require('cheerio');
var rest = require('restler');
var HTMLFILE_DEFAULT = "index.html";
var CHECKSFILE_DEFAULT = "checks.json";
var URL_DEFAULT = "http://cryptic-spire-7925.herokuapp.com/index.html";

var assertFileExists = function(infile) {
    var instr = infile.toString();
    if(!fs.existsSync(instr)) {
        console.log("%s does not exist. Exiting.", instr);
        process.exit(1); // http://nodejs.org/api/process.html#process_process_exit_code
    }
    return instr;
};

var cheerioHtmlFile = function(htmlfile) {
    return cheerio.load(fs.readFileSync(htmlfile));
};

var loadChecks = function(checksfile) {
    return JSON.parse(fs.readFileSync(checksfile));
};

var checkHtmlFile = function(htmlfile, checksfile) {
    $ = cheerioHtmlFile(htmlfile);
    var checks = loadChecks(checksfile).sort();
    var out = {};
    for(var ii in checks) {
        var present = $(checks[ii]).length > 0;
        out[checks[ii]] = present;
    }
    return out;
};

var checkUrl = function(url, checksfile) {
    rest.get(url).on('complete', function(data) {
                $ = cheerio.load(data);
            var checks = loadChecks(checksfile).sort();
            var out = {};
            for(var ii in checks) {
                var present = $(checks[ii]).length > 0;
                out[checks[ii]] = present;
            }
            console.log(out);
        });
}

var clone = function(fn) {
    // Workaround for commander.js issue.
    // http://stackoverflow.com/a/6772648
    return fn.bind({});
};

if(require.main == module) {
    program
        .option('-f, --file <html_file>', 'Path to index.html', clone(assertFileExists), HTMLFILE_DEFAULT)
        .option('-u, --url <url>', 'URL to index.html', URL_DEFAULT)
        .option('-c, --checks <check_file>', 'Path to checks.json', clone(assertFileExists), CHECKSFILE_DEFAULT)
        .parse(process.argv);

    var checkJson = checkHtmlFile(program.file, program.checks);
    var outJson = JSON.stringify(checkJson, null, 4);
    console.log(outJson);

    var checkJson2 = checkUrl(program.url, program.checks);
    var outJson2 = JSON.stringify(checkJson2, null, 4);
    console.log(outJson2);

} 
else {
    exports.checkHtmlFile = checkHtmlFile;
}
Run Code Online (Sandbox Code Playgroud)

小智 3

根据参数调用以下之一checkHtmlFile()checkUrl()

就像是:

if (program.url)
   checkUrl(program.url, program.checks);
else checkHtmlFile(program.file, program.checks);
Run Code Online (Sandbox Code Playgroud)

阅读本文以获取更多参考:command.js 选项解析

另外,checkJson2asundefinedcheckUrl()返回任何内容。