使用async/await 如何实现高效率多层并发

Question

let count = 1;
let startTime = new Date();
const timePromiseFactory = (time) => {
    return new Promise((resolve, reject) => {
    setTimeout(() => {
    console.log(`第${count++}条请求到达,用时${new Date() - startTime}毫秒`);
        resolve(time)
    }, time);
 })
}
function laucher() {
 const times1 = [3000, 1000, 4000]; //第一层请求
 const times2_1 = [2000, 3000, 1000, 2000]; //第二层请求,第一层请求的第一个请求到达后触发
 const times2_2 = [6000, 3000]; //第二层请求，第一层请求的第二个请求到达后触发
 const times2_3 = [4000]; //第二层请求，第一层请求的第三个请求到达后触发
 times1.map((time) => timePromiseFactory(time).then(function (time) {
      if (time === 3000) {
         times2_1.map((time) => timePromiseFactory(time))
       } else if (time === 1000) {
         times2_2.map((time) => timePromiseFactory(time))
       } else {
         times2_3.map((time) => timePromiseFactory(time))    }
  })); 
          
}
laucher();

输出  第1条请求到达,用时1005毫秒
VM146:6 第2条请求到达,用时3010毫秒
VM146:6 第3条请求到达,用时4003毫秒
VM146:6 第4条请求到达,用时4011毫秒
VM146:6 第5条请求到达,用时4013毫秒
VM146:6 第6条请求到达,用时5013毫秒
VM146:6 第7条请求到达,用时5013毫秒
VM146:6 第8条请求到达,用时6012毫秒
VM146:6 第9条请求到达,用时7011毫秒
VM146:6 第10条请求到达,用时8004毫秒

像文件读取,网站爬虫这些程序,很多时候要实现多层并发,以上简单模拟了2层并发,可以看到8秒后输出10个请求,理论来说如果没有并发的限制下实现了最高效率的并发执行,上面使用的是promise,如何把其改写为async/await,也就是利用async/await,改写以上程序,程序中不能出现then方法,并在8秒内输出10个请求

Answer 1

function laucher() {
    const times1 = [3000, 1000, 4000];
    //第一层请求
    const times2_1 = [2000, 3000, 1000, 2000];
    //第二层请求,第一层请求的第一个请求到达后触发
    const times2_2 = [6000, 3000];
    //第二层请求，第一层请求的第二个请求到达后触发
    const times2_3 = [4000];
    //第二层请求，第一层请求的第三个请求到达后触发
    times1.forEach((time)=>{
        (async()=>{
            await timePromiseFactory(time);
            if (time === 3000) {
                times2_1.forEach((time)=>{
                    timePromiseFactory(time);
                });
            } else if (time === 1000) {
                times2_2.forEach((time)=>{
                    timePromiseFactory(time);
                });
            } else {
                times2_3.forEach((time)=>{
                    timePromiseFactory(time);
                });
            }
        }
        )();
        console.log(time);
    }
    );
}

Answer 2

你的例子太过于复杂，什么第一层第二层的，看了老半天。

提炼你的要点：1、并发 2、高效率

1、并发

使用Promise.all就行了。比如：

await Promise.all([p1, p2, p3]);

或者直接执行

for (let i = 0; i < datas.length; i++) {
    let info  = datas[i];
    sleep(info).then((value) => {
      console.log(value);
    });
}

参考：https://segmentfault.com/q/10...

2、高效率。
何为高效率？只不过就是你想控制并发数罢了。要么自己实现计数，要么使用第三方封装好的。比如async，设置并发20个

var mapLimit = require("async/mapLimit");
mapLimit(datas, 20, async function(info, callback){

    return await sleep(3);

}, function(err, result){

});

如果想弄清楚原理，这里贴一个函数，可以控制并发：

function map(arr, fn, concurrency) {

  concurrency = concurrency || 1;

  return new Promise(function(resolve, reject) {

    var completed = 0;
    var started = 0;
    var running = 0;
    var results = new Array(arr.length);

    (function replenish() {
      if (completed >= arr.length) {
        return resolve(results);
      };

      while (running < concurrency && started < arr.length) {
        running++;
        started++;

        var index = started - 1;
        console.log('hd', arr[index], arr[index], index);
        fn.call(arr[index], arr[index], index) // item,index
          .then(function(result) {
            // console.log('done');
            running--;
            completed++;
            results[index] = result;

            replenish();
          })
          .catch(reject);
      }
    })();
  });
}