js需要同时发起百条接口请求怎么办?--通过Promise实现分批处理接口请求

2024-03-06 12:12

本文主要是介绍js需要同时发起百条接口请求怎么办?--通过Promise实现分批处理接口请求,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

如何通过 Promise 实现百条接口请求?
实际项目中遇到需要批量发起上百条接口请求怎么办?
最新案例代码在此!点击看看

前言

  • 不知你项目中有没有遇到过这样的情况,反正我的实际工作项目中真的遇到了这种玩意,一个接口获取一份列表,列表中的每一项都有一个属性需要通过另一个请求来逐一赋值,然后就有了这份封装
  • 真的是很多功能都是被逼出来的
  • 这份功能中要提醒一下:批量请求最关键的除了分批功能之外,适当得取消任务和继续任务也很重要,比如用户到了这个页面后,正在发起百条数据请求,但是这些批量请求还没完全执行完,用户离开了这个页面,此时就需要取消剩下正在发起的请求了,而且如果你像我的遇到的项目一样,页面还会被缓存,那么为了避免用户回到这个页面,所有请求又重新发起一遍的话,就需要实现继续任务的功能,其实这个继续任务比断点续传简单多了,就是过滤到那些已经赋值的数据项就行了
  • 如果看我啰啰嗦嗦一堆烂东西没看明白的话,就直接看下面的源码吧

代码改进说明

    • 这里需要特别感谢下网友热心检查,我原先写的代码中确实存在问题
  • (原先的代码逻辑确实只是对响应做了分批处理,只是我的实际的老项目代码中也存在一定问题,导致让我反而也能实现分批发起请求的目的,但是还是需要改进的)
    • 感谢热心网友的检查: @倔犟小名 @月凡丶
    • 以下内容是改进后的代码

源码在此!

  • 【注】:这里的 httpRequest 请根据自己项目而定,比如我的项目是uniapp,里面的http请求是 uni.request,若你的项目是 axios 或者 ajax,那就根据它们来对 BatchHttp 中的某些部分进行相应的修改

    • 比如:其中的 cancelAll() 函数,若你的 http 取消请求的方式不同,那么这里取消请求的功能就需要相应的修改,若你使用的是 fetch 请求,那除了修改 cancelAll 功能之外,singleRequest 中收集请求任务的方式也要修改,因为 fetch 是不可取消的,需要借助 AbortController 来实现取消请求的功能,
    • 提示一下,不管你用的是什么请求框架,你都可以自己二次封装一个 request.js,功能就仿照 axios 这种,返回的对象中包含一个 abort() 函数即可,那么这份 BatchHttp 也就能适用啦
  • 简单案例测试 -- batch-promise-test.html

<!DOCTYPE html>
<html lang="en"><head><meta charset="UTF-8"><meta name="viewport" content="width=device-width, initial-scale=1.0"><title>Document</title>
</head><body></body>
<script>/*** 批量请求封装*/class BatchHttp {/** * 构造函数 * */constructor() {}/** * 单个数据项请求 * @private* @param {Object} reqOptions - 请求配置* @param {Object} item - 数据项 * @returns {Promise} 请求Promise*/#singleRequest(item) {return new Promise((resolve, _reject) => {// 模拟异步请求console.log(`发起模拟异步请求 padding...: 【${item}】`)setTimeout(() => {console.log(`模拟异步请求 success -- 【 ${item}】`)resolve()}, 200 + Math.random() * 800)})}#chunk(array, size) {const chunks = []let index = 0while (index < array.length) {chunks.push(array.slice(index, size + index))index += size}return chunks}/*** 批量请求控制* @private* @async* @returns {Promise}*/async #batchRequest() {const promiseArray = []let data = [1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12, 13, 14, 15, 16, 17, 18, 19, 20, 21, 22, 23, 24, 25, 26, 27, 28, 29, 30, 31, 32, 33, 34, 35, 36, 37, 38, 39, 40, 41, 42, 43, 44, 45, 46, 47, 48, 49, 50, 51, 52, 53, 54, 55, 56, 57, 58, 59, 60, 61, 62, 63, 64, 65, 66, 67, 68, 69, 70, 71, 72, 73, 74, 75, 76, 77, 78, 79, 80, 81, 82, 83, 84, 85, 86, 87, 88, 89, 90, 91, 92, 93, 94, 95, 96, 97, 98, 99, 100]data.forEach((item, index) => {// 原来的错误逻辑(原来的逻辑,导致所有的 Promise 回调函数都会被直接执行,那么就只有对 response 进行分批的功能了)// const requestPromise = this.#singleRequest(item)// promiseArray.push(requestPromise)// -- 修改为:promiseArray.push(index)})const promiseChunks = this.#chunk(promiseArray, 10) // 切分成 n 个请求为一组let groupIndex = 1for (let ckg of promiseChunks) {// -- 修改后新增逻辑(在发起一组请求时,收集该组对应的 Promiise 成员)const ck = ckg.map(idx => this.#singleRequest(data[idx]))// 发起一组请求const ckRess = await Promise.all(ck) // 控制并发数console.log(`------ 第${groupIndex}组分批发起完毕 --------`)groupIndex += 1}}/*** 执行批量请求操作*/exec(options) {this.#batchRequest(options)}}const batchHttp = new BatchHttp()setTimeout(() => {batchHttp.exec()}, 2000)
</script></html>
  • BatchHttp.js

调用案例在此!

  • 由于我的项目是uni-app这种,方便起见,我就直接贴上在 uni-app 的页面 vue 组件中的使用案例

  • 案例代码仅展示关键部分,所以比较粗糙,看懂参考即可

<template><view v-for="item of list" :key="item.key"><image :src="item.url"></image></view></template><script>import { BatchHttp } from '@/utils/BatchHttp.js'export default {data() {return {isLoaded: false,batchHttpInstance: null,list:[]}},onLoad(options) {this.queryList()},onShow() {// 第一次进页面时,onLoad 和 onShow 都会执行,onLoad 中 getList 已调用 batchQueryUrl,这里仅对缓存页面后再次进入该页面有效if(this.isLoaded) {// 为了实现继续请求上一次可能未完成的批量请求,再次进入该页面时,会检查是否存在未完成的任务,若存在则继续发起批量请求this.batchQueryUrl(this.dataList)}this.isLoaded = true},onHide() {// 页面隐藏时,会直接取消所有批量请求任务,避免占用资源(下次进入该页面会检查未完成的批量请求任务并执行继续功能)this.cancelBatchQueryUrl()},onUnload() {// 页面销毁时,直接取消批量请求任务this.cancelBatchQueryUrl()},onBackPress() {// 路由返回时,直接取消批量请求任务(虽然路由返回也会执行onHide事件,但是无所胃都写上,会判断当前有没有任务的)this.cancelBatchQueryUrl()},methods: {async queryList() {// 接口不方法直接贴的,这里是模拟的列表接口const res = await mockHttpRequest()this.list = res.data// 发起批量请求// 用 nextTick 也行,只要确保批量任务在列表dom已挂载完成之后执行即可setTimeout(()=>{this.batchQueryUrl(resData)},0)},/*** 批量处理图片url的接口请求* @param {*} data */batchQueryUrl(items) {let batchHttpInstance = this.batchHttpInstance// 判定当前是否有正在执行的批量请求任务,有则直接全部取消即可if(!!batchHttpInstance) {batchHttpInstance.cancelAll()this.batchHttpInstance = nullbatchHttpInstance = null}// 实例化对象batchHttpInstance = new BatchHttp()// 设置过滤数据的属性名(用于实现继续任务功能)batchHttpInstance.setPassFlagProp('url') // 实现回到该缓存页面是能够继续批量任务的关键一步 <-----const reqOptions = { url: '/api/product/url' }batchHttpInstance.exec({items, reqOptions, chunkCallback:(ress)=>{let newDataList = this.dataListfor(const r of ress) {newDataList = newDataList.map(d => d.feId === r['sourceItem'].feId ? {...d,url:r['res'].msg} : d)}this.dataList = newDataList}})this.batchHttpInstance = batchHttpInstance},/*** 取消批量请求*/cancelBatchQueryUrl() {if(!!this.batchHttpInstance) {this.batchHttpInstance.cancelAll()this.batchHttpInstance = null}},}}</script>

这篇关于js需要同时发起百条接口请求怎么办?--通过Promise实现分批处理接口请求的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/780029

相关文章

Oracle查询优化之高效实现仅查询前10条记录的方法与实践

《Oracle查询优化之高效实现仅查询前10条记录的方法与实践》:本文主要介绍Oracle查询优化之高效实现仅查询前10条记录的相关资料,包括使用ROWNUM、ROW_NUMBER()函数、FET... 目录1. 使用 ROWNUM 查询2. 使用 ROW_NUMBER() 函数3. 使用 FETCH FI

Python脚本实现自动删除C盘临时文件夹

《Python脚本实现自动删除C盘临时文件夹》在日常使用电脑的过程中,临时文件夹往往会积累大量的无用数据,占用宝贵的磁盘空间,下面我们就来看看Python如何通过脚本实现自动删除C盘临时文件夹吧... 目录一、准备工作二、python脚本编写三、脚本解析四、运行脚本五、案例演示六、注意事项七、总结在日常使用

Java实现Excel与HTML互转

《Java实现Excel与HTML互转》Excel是一种电子表格格式,而HTM则是一种用于创建网页的标记语言,虽然两者在用途上存在差异,但有时我们需要将数据从一种格式转换为另一种格式,下面我们就来看看... Excel是一种电子表格格式,广泛用于数据处理和分析,而HTM则是一种用于创建网页的标记语言。虽然两

Java中Springboot集成Kafka实现消息发送和接收功能

《Java中Springboot集成Kafka实现消息发送和接收功能》Kafka是一个高吞吐量的分布式发布-订阅消息系统,主要用于处理大规模数据流,它由生产者、消费者、主题、分区和代理等组件构成,Ka... 目录一、Kafka 简介二、Kafka 功能三、POM依赖四、配置文件五、生产者六、消费者一、Kaf

详解Java如何向http/https接口发出请求

《详解Java如何向http/https接口发出请求》这篇文章主要为大家详细介绍了Java如何实现向http/https接口发出请求,文中的示例代码讲解详细,感兴趣的小伙伴可以跟随小编一起学习一下... 用Java发送web请求所用到的包都在java.net下,在具体使用时可以用如下代码,你可以把它封装成一

使用Python实现在Word中添加或删除超链接

《使用Python实现在Word中添加或删除超链接》在Word文档中,超链接是一种将文本或图像连接到其他文档、网页或同一文档中不同部分的功能,本文将为大家介绍一下Python如何实现在Word中添加或... 在Word文档中,超链接是一种将文本或图像连接到其他文档、网页或同一文档中不同部分的功能。通过添加超

C#使用HttpClient进行Post请求出现超时问题的解决及优化

《C#使用HttpClient进行Post请求出现超时问题的解决及优化》最近我的控制台程序发现有时候总是出现请求超时等问题,通常好几分钟最多只有3-4个请求,在使用apipost发现并发10个5分钟也... 目录优化结论单例HttpClient连接池耗尽和并发并发异步最终优化后优化结论我直接上优化结论吧,

windos server2022里的DFS配置的实现

《windosserver2022里的DFS配置的实现》DFS是WindowsServer操作系统提供的一种功能,用于在多台服务器上集中管理共享文件夹和文件的分布式存储解决方案,本文就来介绍一下wi... 目录什么是DFS?优势:应用场景:DFS配置步骤什么是DFS?DFS指的是分布式文件系统(Distr

NFS实现多服务器文件的共享的方法步骤

《NFS实现多服务器文件的共享的方法步骤》NFS允许网络中的计算机之间共享资源,客户端可以透明地读写远端NFS服务器上的文件,本文就来介绍一下NFS实现多服务器文件的共享的方法步骤,感兴趣的可以了解一... 目录一、简介二、部署1、准备1、服务端和客户端:安装nfs-utils2、服务端:创建共享目录3、服

C#使用yield关键字实现提升迭代性能与效率

《C#使用yield关键字实现提升迭代性能与效率》yield关键字在C#中简化了数据迭代的方式,实现了按需生成数据,自动维护迭代状态,本文主要来聊聊如何使用yield关键字实现提升迭代性能与效率,感兴... 目录前言传统迭代和yield迭代方式对比yield延迟加载按需获取数据yield break显式示迭