JS异步操作串行和并行如何执行,结合的方式又是怎样
Admin 2022-07-01 群英技术资讯 559 次浏览
本文写一下js
中es5
和es6
针对异步函数,串行执行和并行执行的方案。已经串行和并行结合使用的例子。
在es6出来之前,社区nodejs
中针对回调地狱,已经有了promise
方案。假如多个异步函数,执行循序怎么安排,如何才能更快的执行完所有异步函数,再执行下一步呢?这里就出现了js的串行执行和并行执行问题。
var items = [ 1, 2, 3, 4, 5, 6 ]; var results = []; function async(arg, callback) { console.log('参数为 ' + arg +' , 1秒后返回结果'); setTimeout(function () { callback(arg * 2); }, 1000); } function final(value) { console.log('完成: ', value); } function series(item) { if(item) { async( item, function(result) { results.push(result); return series(items.shift());// 递归执行完所有的数据 }); } else { return final(results[results.length - 1]); } } series(items.shift());
上面函数是一个一个执行的,上一个执行结束再执行下一个,类似es6
(es5之后统称es6)中 async 和await,那有没有类似promise.all
这种,所有的并行执行的呢?
可以如下写:
var items = [ 1, 2, 3, 4, 5, 6 ]; var results = []; function async(arg, callback) { console.log('参数为 ' + arg +' , 1秒后返回结果'); setTimeout(function () { callback(arg * 2); }, 1000); } function final(value) { console.log('完成: ', value); } items.forEach(function(item) {// 循环完成 async(item, function(result){ results.push(result); if(results.length === items.length) {// 判断执行完毕的个数是否等于要执行函数的个数 final(results[results.length - 1]); } }) });
假如并行执行很多条异步(几百条)数据,每个异步数据中有很多的(https)请求数据,势必造成tcp 连接数不足,或者堆积了无数调用栈导致内存溢出。所以并行执行不易太多数据,因此,出现了并行和串行结合的方式。
代码可以如下书写:
var items = [ 1, 2, 3, 4, 5, 6 ]; var results = []; var running = 0; var limit = 2; function async(arg, callback) { console.log('参数为 ' + arg +' , 1秒后返回结果'); setTimeout(function () { callback(arg * 2); }, 1000); } function final(value) { console.log('完成: ', value); } function launcher() { while(running < limit && items.length > 0) { var item = items.shift(); async(item, function(result) { results.push(result); running--; if(items.length > 0) { launcher(); } else if(running == 0) { final(results); } }); running++; } } launcher();
es6
天然自带串行和并行的执行方式,例如串行可以用async
和await
(前文已经讲解),并行可以用promise.all等等。那么针对串行和并行结合,限制promise all
并发数量,社区也有一些方案,例如
tiny-async-pool、es6-promise-pool、p-limit
简单封装一个promise all
并发数限制解决方案函数
function PromiseLimit(funcArray, limit = 5) { // 并发执行5条数据 let i = 0; const result = []; const executing = []; const queue = function() { if (i === funcArray.length) return Promise.all(executing); const p = funcArray[i++](); result.push(p); const e = p.then(() => executing.splice(executing.indexOf(e), 1)); executing.push(e); if (executing.length >= limit) { return Promise.race(executing).then( () => queue(), e => Promise.reject(e) ); } return Promise.resolve().then(() => queue()); }; return queue().then(() => Promise.all(result)); }
使用:
// 测试代码 const result = []; for (let index = 0; index < 10; index++) { result.push(function() { return new Promise((resolve, reject) => { console.log("开始" + index, new Date().toLocaleString()); setTimeout(() => { resolve(index); console.log("结束" + index, new Date().toLocaleString()); }, parseInt(Math.random() * 10000)); }); }); } PromiseLimit(result).then(data => { console.log(data); });
修改测试代码,新增随机失败逻辑
// 修改测试代码 随机失败或者成功 const result = []; for (let index = 0; index < 10; index++) { result.push(function() { return new Promise((resolve, reject) => { console.log("开始" + index, new Date().toLocaleString()); setTimeout(() => { if (Math.random() > 0.5) { resolve(index); } else { reject(index); } console.log("结束" + index, new Date().toLocaleString()); }, parseInt(Math.random() * 1000)); }); }); } PromiseLimit(result).then( data => { console.log("成功", data); }, data => { console.log("失败", data); } );
async function PromiseAll(promises,batchSize=10) { const result = []; while(promises.length > 0) { const data = await Promise.all(promises.splice(0,batchSize)); result.push(...data); } return result; }
这么写有2个问题:
Promise.all
前就已经创建好了promises
,实际上promise
已经执行了batchSize个promise resolve
,才能跑下一批的batchSize
个,也就是promise all
全部成功才可以。改进如下:
async function asyncPool(array,poolLimit,iteratorFn) { const ret = []; const executing = []; for (const item of array) { const p = Promise.resolve().then(() => iteratorFn(item, array)); ret.push(p); if (poolLimit <= array.length) { const e = p.then(() => executing.splice(executing.indexOf(e), 1)); executing.push(e); if (executing.length >= poolLimit) { await Promise.race(executing); } } } return Promise.all(ret); }
使用:
const timeout = i => new Promise(resolve => setTimeout(() => resolve(i), i)); return asyncPool( [1000, 5000, 3000, 2000], 2,timeout).then(results => { ... });
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:mmqy2019@163.com进行举报,并提供相关证据,查实之后,将立刻删除涉嫌侵权内容。
猜你喜欢
这篇文章主要介绍了JavaScript组合继承,下面文章将围绕了JavaScript组合继承的相关资料展开详细内容,需要的小伙伴可以参考一下,希望对你有所帮助
这篇文章主要为大家介绍了node.js中Util模块的教程示例详解,带大家充分的了解node.js的util模块,有需要的朋友可以借鉴参考下,希望能够有所帮助
Vue组件为什么data必须是一个函数?我们需要先复习下原型链的知识,其实这个问题取决于 js ,而并非是 vue 。
这篇文章主要为大家介绍了2023年了该了解下WebComponent使用教程,有需要的朋友可以借鉴参考下,希望能够有所帮助,祝大家多多进步,早日升职加薪
通过改变默认npm镜像代理服务,以下三种办法任意一种都能解决问题,建议使用第三种,将配置写死,下次用的时候不用重新配置。通过config命令npmconfigsetregistry https://registry.npm.taobao.orgnpminfounderscore(如果上面配置正确这个命令会有字符串response)命令行指定npm--registry
成为群英会员,开启智能安全云计算之旅
立即注册Copyright © QY Network Company Ltd. All Rights Reserved. 2003-2020 群英 版权所有
增值电信经营许可证 : B1.B2-20140078 粤ICP备09006778号 域名注册商资质 粤 D3.1-20240008