rxjava之数据分批加载

2024-03-06 13:32
文章标签 java 数据 加载 rx 分批

本文主要是介绍rxjava之数据分批加载,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

使用场景:

当从服务器请求的数据比较庞大时,这个时候,需要对数据进行分批处理,然后以当前的数据刷新界面

效果图:

image

原理分析图:

image

完整代码如下:

mDataInfo = new DataInfo();
List<Integer> objects = new ArrayList<>();
for (int i = 0; i < 4000; i++) {objects.add(i);
}
mDataInfo.l1 = objects;
objects = new ArrayList<>();
for (int i = 0; i < 8000; i++) {objects.add(i);
}
mDataInfo.l2 = objects;
objects = new ArrayList<>();
for (int i = 0; i < 12000; i++) {objects.add(i);
}Observable.concat(Observable.just(mDataInfo.l1), Observable.just(mDataInfo.l2), Observable.just(mDataInfo.l3)).subscribeOn(Schedulers.io()).concatMap(new Function<List<Integer>, Observable<NewPageInfo>>() {@Overridepublic Observable<NewPageInfo> apply(List<Integer> list1) throws Exception {LoggerUtils.loge("concatMap list1.size = " + list1.size());List<NewPageInfo> list = new ArrayList<>();int pageSize = list1.size() / 1000;int start = -1, end = 0;List<Integer> tmp = new ArrayList<>(list1);NewPageInfo newPageInfo = null;String tagStr = "";if (list1.size() == mDataInfo.l1.size()) {tagStr = "l1";} else if (list1.size() == mDataInfo.l2.size()) {tagStr = "l2";} else if (list1.size() == mDataInfo.l3.size()) {tagStr = "l3";}for (int i = 0; i < pageSize; i++) {// 0 : 0// 1 1000start = i * 1000;end = (i + 1) * 1000 - 1;LoggerUtils.loge("s : " + start + " , e : " + end);List<Integer> subList = tmp.subList(start, end);newPageInfo = new NewPageInfo();newPageInfo.tag = tagStr;newPageInfo.datas = subList;newPageInfo.page = i + "";list.add(newPageInfo);}ThreadUtils.doSleep(1500);return Observable.fromIterable(list);}}).observeOn(AndroidSchedulers.mainThread()).subscribe(new Consumer<NewPageInfo>() {@Overridepublic void accept(NewPageInfo newPageInfo) throws Exception {List<Integer> datas = newPageInfo.datas;int size = datas.size();String msg = "count : " + newPageInfo.page + " , dataSize : " + size + " " +", " + "scope : start : " + datas.get(0) + " , end : " + datas.get(size- 1);LoggerUtils.loge(msg);UiUtils.postDelayed(new Runnable() {@Overridepublic void run() {if ("l1".equalsIgnoreCase(newPageInfo.tag)) {line1.append(msg + "\r\n");} else if ("l2".equalsIgnoreCase(newPageInfo.tag)) {line2.append(msg + "\r\n");} else if ("l3".equalsIgnoreCase(newPageInfo.tag)) {line3.append(msg + "\r\n");}}}, 800);}});

场景二

以上的操作,对象为空了,直接就会抛出空指针的异常,流程没办法往下走了。

改进后的操作如下

image

示例代码
private void initData() {MPChartInfo mpChartInfo = new MPChartInfo();mDataInfo = new DataInfo();List<Integer> objects = new ArrayList<>();for (int i = 0; i < 1000; i++) {objects.add(i);}mDataInfo.name = "l1";mDataInfo.l1 = objects;mpChartInfo.V52 = mDataInfo;mDataInfo = new DataInfo();objects = new ArrayList<>();for (int i = 0; i < 2000; i++) {objects.add(i);}mDataInfo.l1 = objects;objects = new ArrayList<>();for (int i = 0; i < 3000; i++) {objects.add(i);}mDataInfo.l2 = objects;mDataInfo.name = "l2";mpChartInfo.V54 = mDataInfo;mDataInfo = new DataInfo();objects = new ArrayList<>();for (int i = 0; i < 3000; i++) {objects.add(i);}mDataInfo.l1 = objects;objects = new ArrayList<>();for (int i = 0; i < 4000; i++) {objects.add(i);}mDataInfo.l2 = objects;objects = new ArrayList<>();for (int i = 0; i < 5000; i++) {objects.add(i);}mDataInfo.name = "l3";mDataInfo.l3 = objects;mpChartInfo.V58 = mDataInfo;showUI(mpChartInfo);
} /*** 标识传递,空数据的处理*/
private void ll_02_03(MPChartInfo mpChartInfo) {mV52 = mpChartInfo.getV52();mV54 = mpChartInfo.getV54();mV54 = null;// 对象为空时就使用空的ObservableObservable empty = Observable.empty();mV58 = mpChartInfo.getV58();mV58 = null;Observable.concat(mV52 != null ? Observable.just(mV52) : empty, mV54 != null ? Observable.just(mV54) : empty, mV58 != null ? Observable.just(mV58) : empty).subscribeOn(Schedulers.io()).concatMap(new Function<DataInfo, Observable<Map<String, List<Integer>>>>() {@Overridepublic Observable<Map<String, List<Integer>>> apply(DataInfo dataInfo) throwsException {LoggerUtils.loge("concatMap apply = " + dataInfo.name);ThreadUtils.doSleep(300);List<Integer> l1 = dataInfo.l1;List<Integer> l2 = dataInfo.l2;List<Integer> l3 = dataInfo.l3;// 定义标识,标识一定要往下传递,要区分是刷新哪个控件使用 Map<String, List<Integer>> map = new LinkedHashMap<>();map.put(dataInfo.name, l1);// 对象为空或集合为空时,使用空的ObservableObservable<Map<String, List<Integer>>> source1 = l1 != null && l1.size()> 0 ?Observable.just(map) : empty;map = new LinkedHashMap<>();map.put(dataInfo.name, l2);Observable<Map<String, List<Integer>>> source2 = l2 != null && l2.size()> 0 ? Observable.just(map) : empty;map = new LinkedHashMap<>();map.put(dataInfo.name, l3);Observable<Map<String, List<Integer>>> source3 = l3 != null && l3.size()> 0 ?Observable.just(map) :empty;Observable<Map<String, List<Integer>>> concat = Observable.concat(source1, source2,source3);return concat;}}).subscribeOn(Schedulers.io()).concatMap(new Function<Map<String, List<Integer>>, Observable<NewPageInfo>>() {@Overridepublic Observable<NewPageInfo> apply(Map<String, List<Integer>> list1) throwsException {Iterator<Map.Entry<String, List<Integer>>> iterator = list1.entrySet().iterator();Map.Entry<String, List<Integer>> entry = iterator.next();List<Integer> entryValue = entry.getValue();String key = entry.getKey();LoggerUtils.loge("concatMap apply tag = " + key + " , list1.size " +"= " + entryValue.size());List<NewPageInfo> list = new ArrayList<>();int pageSize = entryValue.size() / 1000;int start = -1, end = 0;List<Integer> tmp = new ArrayList<>(entryValue);NewPageInfo newPageInfo = null;String tagStr = key;for (int i = 0; i < pageSize; i++) {// 0 : 0// 1 1000start = i * 1000;end = (i + 1) * 1000 - 1;
//                            LoggerUtils.loge("s : " + start + " , e : " + end);List<Integer> subList = tmp.subList(start, end);newPageInfo = new NewPageInfo();newPageInfo.tag = tagStr;newPageInfo.datas = subList;newPageInfo.page = i + "";list.add(newPageInfo);}ThreadUtils.doSleep(500);return Observable.fromIterable(list);}}).observeOn(AndroidSchedulers.mainThread()).subscribe(new Consumer<NewPageInfo>() {@Overridepublic void accept(NewPageInfo newPageInfo) throws Exception {List<Integer> datas = newPageInfo.datas;int size = datas.size();String msg = "count : " + newPageInfo.page + " , dataSize : " + size + " " +", " + "scope : start : " + datas.get(0) + " , end : " + datas.get(size- 1);LoggerUtils.loge("consumer name = " + newPageInfo.tag + " , dataSize : "+ size);UiUtils.postDelayed(new Runnable() {@Overridepublic void run() {// 根据标签刷新控件if ("l1".equalsIgnoreCase(newPageInfo.tag)) {line1.append(msg + "\r\n");} else if ("l2".equalsIgnoreCase(newPageInfo.tag)) {line2.append(msg + "\r\n");} else if ("l3".equalsIgnoreCase(newPageInfo.tag)) {line3.append(msg + "\r\n");}}}, 400);}});
}

简书文章地址

这篇关于rxjava之数据分批加载的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/780216

相关文章

SpringBoot条件注解核心作用与使用场景详解

《SpringBoot条件注解核心作用与使用场景详解》SpringBoot的条件注解为开发者提供了强大的动态配置能力,理解其原理和适用场景是构建灵活、可扩展应用的关键,本文将系统梳理所有常用的条件注... 目录引言一、条件注解的核心机制二、SpringBoot内置条件注解详解1、@ConditionalOn

通过Spring层面进行事务回滚的实现

《通过Spring层面进行事务回滚的实现》本文主要介绍了通过Spring层面进行事务回滚的实现,包括声明式事务和编程式事务,具有一定的参考价值,感兴趣的可以了解一下... 目录声明式事务回滚:1. 基础注解配置2. 指定回滚异常类型3. ​不回滚特殊场景编程式事务回滚:1. ​使用 TransactionT

MySQL 中查询 VARCHAR 类型 JSON 数据的问题记录

《MySQL中查询VARCHAR类型JSON数据的问题记录》在数据库设计中,有时我们会将JSON数据存储在VARCHAR或TEXT类型字段中,本文将详细介绍如何在MySQL中有效查询存储为V... 目录一、问题背景二、mysql jsON 函数2.1 常用 JSON 函数三、查询示例3.1 基本查询3.2

Spring LDAP目录服务的使用示例

《SpringLDAP目录服务的使用示例》本文主要介绍了SpringLDAP目录服务的使用示例... 目录引言一、Spring LDAP基础二、LdapTemplate详解三、LDAP对象映射四、基本LDAP操作4.1 查询操作4.2 添加操作4.3 修改操作4.4 删除操作五、认证与授权六、高级特性与最佳

Spring Shell 命令行实现交互式Shell应用开发

《SpringShell命令行实现交互式Shell应用开发》本文主要介绍了SpringShell命令行实现交互式Shell应用开发,能够帮助开发者快速构建功能丰富的命令行应用程序,具有一定的参考价... 目录引言一、Spring Shell概述二、创建命令类三、命令参数处理四、命令分组与帮助系统五、自定义S

SpringBatch数据写入实现

《SpringBatch数据写入实现》SpringBatch通过ItemWriter接口及其丰富的实现,提供了强大的数据写入能力,本文主要介绍了SpringBatch数据写入实现,具有一定的参考价值,... 目录python引言一、ItemWriter核心概念二、数据库写入实现三、文件写入实现四、多目标写入

SpringSecurity JWT基于令牌的无状态认证实现

《SpringSecurityJWT基于令牌的无状态认证实现》SpringSecurity中实现基于JWT的无状态认证是一种常见的做法,本文就来介绍一下SpringSecurityJWT基于令牌的无... 目录引言一、JWT基本原理与结构二、Spring Security JWT依赖配置三、JWT令牌生成与

Java中Date、LocalDate、LocalDateTime、LocalTime、时间戳之间的相互转换代码

《Java中Date、LocalDate、LocalDateTime、LocalTime、时间戳之间的相互转换代码》:本文主要介绍Java中日期时间转换的多种方法,包括将Date转换为LocalD... 目录一、Date转LocalDateTime二、Date转LocalDate三、LocalDateTim

如何配置Spring Boot中的Jackson序列化

《如何配置SpringBoot中的Jackson序列化》在开发基于SpringBoot的应用程序时,Jackson是默认的JSON序列化和反序列化工具,本文将详细介绍如何在SpringBoot中配置... 目录配置Spring Boot中的Jackson序列化1. 为什么需要自定义Jackson配置?2.

Java中使用Hutool进行AES加密解密的方法举例

《Java中使用Hutool进行AES加密解密的方法举例》AES是一种对称加密,所谓对称加密就是加密与解密使用的秘钥是一个,下面:本文主要介绍Java中使用Hutool进行AES加密解密的相关资料... 目录前言一、Hutool简介与引入1.1 Hutool简介1.2 引入Hutool二、AES加密解密基础