将一个大文件附加到 nodejs 中的另一个大文件

Question

我正在使用电子框架（atom shell）开发一个应用程序，我是 NodeJS 的新手。这通过在 http get 请求中指定字节范围将大文件下载为两个（或更多）块（每个 >2GB）。完成后我想合并这两个文件。到目前为止，我已经能够想到一个解决方案，即打开两个文件并使用 fs.appendFile 将第二个文件的块附加到第一个文件。在我看来，这将是一个非常缓慢的过程，并且还会阻塞 nodejs。有没有其他有效的方法。我也愿意生成一个子进程并使用其他一些应用程序。

Answer 1

您可以使用 node.js 中的流将一个文件附加到另一个文件：

var fs = require('fs');

// open destination file for appending
var w = fs.createWriteStream("output.txt", {flags: 'a'});
// open source file for reading
var r = fs.createReadStream("input.txt");

w.on('close', function() {
    console.log("done writing");
});

r.pipe(w);

这将缓冲文件，分块读取，分块写入，关闭两个文件，所有这些都为您完成。

而且，这一切都是通过异步文件 I/O 完成的，因此它将允许其他 node.js 活动交错（例如，不会阻止 node.js）。