使用NodeJ读取大文件的最后一行

Question

我正在使用此示例读取一个大文件：

var fs = require('fs');
var readline = require('readline');
var stream = require('stream');

var instream = fs.createReadStream('your/file');
var outstream = new stream;
var rl = readline.createInterface(instream, outstream);

rl.on('line', function(line) {
  // process line here
});

rl.on('close', function() {
  // do something on finish here
});

我想知道什么时候line是文件的最后一行。我阅读了文档，但找不到解决方案。我已经尝试过：

rl.on('line', function(line) {
    if (line == '' || line == require("os").EOL)
        console.log('eof');        
});

但是没有用。
你有什么建议吗。谢谢阅读。

Answer 1

我exec(tail -n 1 <filepath>)在我的摩卡测试套件中使用了它，因为我确切地知道它的作用，并且它用更少的代码行来完成它......

不过，在构建应用程序时，它可能不太理想

const { exec } = require("child_process");
exec("tail -n 1 nginx_access.log",  (error, stdout, stderr) => {
   console.log(stdout)
})

Answer 2

Axel 的答案的问题是他假设文件的最后一行是空的或 EOL。不是这种情况。

// fileTools.js
const fs = require('fs');
const readline = require('readline');
const Stream = require('stream');

exports.getLastLine = (fileName, minLength) => {
    let inStream = fs.createReadStream(fileName);
    let outStream = new Stream;
    return new Promise((resolve, reject)=> {
        let rl = readline.createInterface(inStream, outStream);

        let lastLine = '';
        rl.on('line', function (line) {
            if (line.length >= minLength) {
                lastLine = line;
            }
        });

        rl.on('error', reject)

        rl.on('close', function () {
            resolve(lastLine)
        });
    })
}

使用：

const getLastLine = require('./fileTools.js').getLastLine
const fileName = 'C:\\someWinDir\\somelog.log'
const minLineLength = 1
getLastLine(fileName, 1)
    .then((lastLine)=> {
        console.log(lastLine)
    })
    .catch((err)=> {
        console.error(err)
    })

Answer 3

将收到的行保存在全局变量中，然后在到达文件末尾时显示它。

var lastLine = '';
rl.on('line', function(line) {
    if (line == '' || line == require("os").EOL) {
        console.log('eof, last line is', lastLine);
        return;
    }

    lastLine = line;
});

Answer 4

为了有效地读取大文件的最后 N 行，我们可以使用这个 npm 包read-last-lines

https://www.npmjs.com/package/read-last-lines

读取文件最后 50 行的示例：

const readLastLines = require('read-last-lines');
readLastLines.read('path/to/file', 50)
    .then((lines) => console.log(lines));