如何在流中使用ES8异步/等待?


74

https://stackoverflow.com/a/18658613/779159中,示例了如何使用内置的加密库和流来计算文件的md5。

var fs = require('fs');
var crypto = require('crypto');

// the file you want to get the hash    
var fd = fs.createReadStream('/some/file/name.txt');
var hash = crypto.createHash('sha1');
hash.setEncoding('hex');

fd.on('end', function() {
    hash.end();
    console.log(hash.read()); // the desired sha1sum
});

// read all file and pipe it (write it) to the hash object
fd.pipe(hash);

但是是否可以将其转换为使用ES8异步/等待而不是使用上述回调,但仍保持使用流的效率?


2
async/await只是语法上对promise的支持。如果您可以将此代码放入Promise中,那么您就完成了。
菲利克斯·克林

Node.js 10.x支持使用for-await-of读取流(nodejs.org/docs/latest-v10.x/api/…),但我认为这不是您此处问题的正确概念。留给其他可能在这里遇到帮助的人作为笔记。
SimonSimCity

Answers:


102

async/await仅适用于promise,不适用于流。有一些想法可以制作一种类似于流的额外数据类型,该数据类型将具有自己的语法,但是如果有的话,这些想法都是高度实验性的,我将不赘述。

无论如何,您的回调仅等待流的结尾,这非常适合兑现承诺。您只需要包装流:

var fd = fs.createReadStream('/some/file/name.txt');
var hash = crypto.createHash('sha1');
hash.setEncoding('hex');
// read all file and pipe it (write it) to the hash object
fd.pipe(hash);

var end = new Promise(function(resolve, reject) {
    hash.on('end', () => resolve(hash.read()));
    fd.on('error', reject); // or something like that. might need to close `hash`
});

现在您可以等待该承诺:

(async function() {
    let sha1sum = await end;
    console.log(sha1sum);
}());

3
恭喜你!现在这不是一个正确的答案,现在您可以对流2ality.com/2018/04/async-iter-nodejs.html使用异步周期。不幸的是,这是现在的实验功能。
MiF

9
@MiF所以您的答案是错误的,因为它不是“高度实验性”,而仅仅是“实验性”?:-D
Bergi '18年

JS在所有异步情况下都使用了promise和async / await。奇怪的是,这个功能没有在生产中发布。我认为,这是一个很好的sintacsys,并且不会改变。
MiF

您为什么要等待ReadStream end?在散列函数有机会对数据执行之前,Promise不会解决吗?或者,至少,它不会创造竞争条件吗?我假设您想将fd.pipe(hash)in的值存储在变量中并侦听该finish事件,因为这将表明WriteableStream(哈希)已完成。
adam-beck

@ adam-beck听起来你是对的。为什么我这样做呢?因为OP在他们的问题中也这样做了。随时提出修改建议。
Bergi

48

如果使用的节点版本> = v10.0.0,则可以使用stream.pipelineutil.promisify

const fs = require('fs');
const crypto = require('crypto');
const util = require('util');
const stream = require('stream');

const pipeline = util.promisify(stream.pipeline);

const hash = crypto.createHash('sha1');
hash.setEncoding('hex');

async function run() {
  await pipeline(
    fs.createReadStream('/some/file/name.txt'),
    hash
  );
  console.log('Pipeline succeeded');
}

run().catch(console.error);

还应该在某个地方调用管道吗?
Fluous

1
我不得不挖了几个小时才找到答案。为什么不将其作为示例包含在Node Streams文档中?
emzero '20

但这是在文档中。nodejs.org/api/…–
user7339839

这是一个更好的答案
Saille

14

像这样的作品:

for (var res of fetchResponses){ //node-fetch package responses
    const dest = fs.createWriteStream(filePath,{flags:'a'});
    totalBytes += Number(res.headers.get('content-length'));
    await new Promise((resolve, reject) => {
        res.body.pipe(dest);
        res.body.on("error", (err) => {
            reject(err);
        });
        dest.on("finish", function() {
            resolve();
        });
    });         
}

很好的解释,我使用了这个承诺来包装我使用内置在https模块中的NodeJS发出的https请求。谢谢!
亚历克斯·林多内
By using our site, you acknowledge that you have read and understand our Cookie Policy and Privacy Policy.
Licensed under cc by-sa 3.0 with attribution required.