rxjava之数据分批加载

2024-03-06 13:32
文章标签 java 数据 加载 rx 分批

本文主要是介绍rxjava之数据分批加载,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

使用场景:

当从服务器请求的数据比较庞大时,这个时候,需要对数据进行分批处理,然后以当前的数据刷新界面

效果图:

image

原理分析图:

image

完整代码如下:

mDataInfo = new DataInfo();
List<Integer> objects = new ArrayList<>();
for (int i = 0; i < 4000; i++) {objects.add(i);
}
mDataInfo.l1 = objects;
objects = new ArrayList<>();
for (int i = 0; i < 8000; i++) {objects.add(i);
}
mDataInfo.l2 = objects;
objects = new ArrayList<>();
for (int i = 0; i < 12000; i++) {objects.add(i);
}Observable.concat(Observable.just(mDataInfo.l1), Observable.just(mDataInfo.l2), Observable.just(mDataInfo.l3)).subscribeOn(Schedulers.io()).concatMap(new Function<List<Integer>, Observable<NewPageInfo>>() {@Overridepublic Observable<NewPageInfo> apply(List<Integer> list1) throws Exception {LoggerUtils.loge("concatMap list1.size = " + list1.size());List<NewPageInfo> list = new ArrayList<>();int pageSize = list1.size() / 1000;int start = -1, end = 0;List<Integer> tmp = new ArrayList<>(list1);NewPageInfo newPageInfo = null;String tagStr = "";if (list1.size() == mDataInfo.l1.size()) {tagStr = "l1";} else if (list1.size() == mDataInfo.l2.size()) {tagStr = "l2";} else if (list1.size() == mDataInfo.l3.size()) {tagStr = "l3";}for (int i = 0; i < pageSize; i++) {// 0 : 0// 1 1000start = i * 1000;end = (i + 1) * 1000 - 1;LoggerUtils.loge("s : " + start + " , e : " + end);List<Integer> subList = tmp.subList(start, end);newPageInfo = new NewPageInfo();newPageInfo.tag = tagStr;newPageInfo.datas = subList;newPageInfo.page = i + "";list.add(newPageInfo);}ThreadUtils.doSleep(1500);return Observable.fromIterable(list);}}).observeOn(AndroidSchedulers.mainThread()).subscribe(new Consumer<NewPageInfo>() {@Overridepublic void accept(NewPageInfo newPageInfo) throws Exception {List<Integer> datas = newPageInfo.datas;int size = datas.size();String msg = "count : " + newPageInfo.page + " , dataSize : " + size + " " +", " + "scope : start : " + datas.get(0) + " , end : " + datas.get(size- 1);LoggerUtils.loge(msg);UiUtils.postDelayed(new Runnable() {@Overridepublic void run() {if ("l1".equalsIgnoreCase(newPageInfo.tag)) {line1.append(msg + "\r\n");} else if ("l2".equalsIgnoreCase(newPageInfo.tag)) {line2.append(msg + "\r\n");} else if ("l3".equalsIgnoreCase(newPageInfo.tag)) {line3.append(msg + "\r\n");}}}, 800);}});

场景二

以上的操作,对象为空了,直接就会抛出空指针的异常,流程没办法往下走了。

改进后的操作如下

image

示例代码
private void initData() {MPChartInfo mpChartInfo = new MPChartInfo();mDataInfo = new DataInfo();List<Integer> objects = new ArrayList<>();for (int i = 0; i < 1000; i++) {objects.add(i);}mDataInfo.name = "l1";mDataInfo.l1 = objects;mpChartInfo.V52 = mDataInfo;mDataInfo = new DataInfo();objects = new ArrayList<>();for (int i = 0; i < 2000; i++) {objects.add(i);}mDataInfo.l1 = objects;objects = new ArrayList<>();for (int i = 0; i < 3000; i++) {objects.add(i);}mDataInfo.l2 = objects;mDataInfo.name = "l2";mpChartInfo.V54 = mDataInfo;mDataInfo = new DataInfo();objects = new ArrayList<>();for (int i = 0; i < 3000; i++) {objects.add(i);}mDataInfo.l1 = objects;objects = new ArrayList<>();for (int i = 0; i < 4000; i++) {objects.add(i);}mDataInfo.l2 = objects;objects = new ArrayList<>();for (int i = 0; i < 5000; i++) {objects.add(i);}mDataInfo.name = "l3";mDataInfo.l3 = objects;mpChartInfo.V58 = mDataInfo;showUI(mpChartInfo);
} /*** 标识传递,空数据的处理*/
private void ll_02_03(MPChartInfo mpChartInfo) {mV52 = mpChartInfo.getV52();mV54 = mpChartInfo.getV54();mV54 = null;// 对象为空时就使用空的ObservableObservable empty = Observable.empty();mV58 = mpChartInfo.getV58();mV58 = null;Observable.concat(mV52 != null ? Observable.just(mV52) : empty, mV54 != null ? Observable.just(mV54) : empty, mV58 != null ? Observable.just(mV58) : empty).subscribeOn(Schedulers.io()).concatMap(new Function<DataInfo, Observable<Map<String, List<Integer>>>>() {@Overridepublic Observable<Map<String, List<Integer>>> apply(DataInfo dataInfo) throwsException {LoggerUtils.loge("concatMap apply = " + dataInfo.name);ThreadUtils.doSleep(300);List<Integer> l1 = dataInfo.l1;List<Integer> l2 = dataInfo.l2;List<Integer> l3 = dataInfo.l3;// 定义标识,标识一定要往下传递,要区分是刷新哪个控件使用 Map<String, List<Integer>> map = new LinkedHashMap<>();map.put(dataInfo.name, l1);// 对象为空或集合为空时,使用空的ObservableObservable<Map<String, List<Integer>>> source1 = l1 != null && l1.size()> 0 ?Observable.just(map) : empty;map = new LinkedHashMap<>();map.put(dataInfo.name, l2);Observable<Map<String, List<Integer>>> source2 = l2 != null && l2.size()> 0 ? Observable.just(map) : empty;map = new LinkedHashMap<>();map.put(dataInfo.name, l3);Observable<Map<String, List<Integer>>> source3 = l3 != null && l3.size()> 0 ?Observable.just(map) :empty;Observable<Map<String, List<Integer>>> concat = Observable.concat(source1, source2,source3);return concat;}}).subscribeOn(Schedulers.io()).concatMap(new Function<Map<String, List<Integer>>, Observable<NewPageInfo>>() {@Overridepublic Observable<NewPageInfo> apply(Map<String, List<Integer>> list1) throwsException {Iterator<Map.Entry<String, List<Integer>>> iterator = list1.entrySet().iterator();Map.Entry<String, List<Integer>> entry = iterator.next();List<Integer> entryValue = entry.getValue();String key = entry.getKey();LoggerUtils.loge("concatMap apply tag = " + key + " , list1.size " +"= " + entryValue.size());List<NewPageInfo> list = new ArrayList<>();int pageSize = entryValue.size() / 1000;int start = -1, end = 0;List<Integer> tmp = new ArrayList<>(entryValue);NewPageInfo newPageInfo = null;String tagStr = key;for (int i = 0; i < pageSize; i++) {// 0 : 0// 1 1000start = i * 1000;end = (i + 1) * 1000 - 1;
//                            LoggerUtils.loge("s : " + start + " , e : " + end);List<Integer> subList = tmp.subList(start, end);newPageInfo = new NewPageInfo();newPageInfo.tag = tagStr;newPageInfo.datas = subList;newPageInfo.page = i + "";list.add(newPageInfo);}ThreadUtils.doSleep(500);return Observable.fromIterable(list);}}).observeOn(AndroidSchedulers.mainThread()).subscribe(new Consumer<NewPageInfo>() {@Overridepublic void accept(NewPageInfo newPageInfo) throws Exception {List<Integer> datas = newPageInfo.datas;int size = datas.size();String msg = "count : " + newPageInfo.page + " , dataSize : " + size + " " +", " + "scope : start : " + datas.get(0) + " , end : " + datas.get(size- 1);LoggerUtils.loge("consumer name = " + newPageInfo.tag + " , dataSize : "+ size);UiUtils.postDelayed(new Runnable() {@Overridepublic void run() {// 根据标签刷新控件if ("l1".equalsIgnoreCase(newPageInfo.tag)) {line1.append(msg + "\r\n");} else if ("l2".equalsIgnoreCase(newPageInfo.tag)) {line2.append(msg + "\r\n");} else if ("l3".equalsIgnoreCase(newPageInfo.tag)) {line3.append(msg + "\r\n");}}}, 400);}});
}

简书文章地址

这篇关于rxjava之数据分批加载的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/780216

相关文章

MySQL InnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据

《MySQLInnoDB引擎ibdata文件损坏/删除后使用frm和ibd文件恢复数据》mysql的ibdata文件被误删、被恶意修改,没有从库和备份数据的情况下的数据恢复,不能保证数据库所有表数据... 参考:mysql Innodb表空间卸载、迁移、装载的使用方法注意!此方法只适用于innodb_fi

Spring Boot整合消息队列RabbitMQ的实现示例

《SpringBoot整合消息队列RabbitMQ的实现示例》本文主要介绍了SpringBoot整合消息队列RabbitMQ的实现示例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的... 目录RabbitMQ 简介与安装1. RabbitMQ 简介2. RabbitMQ 安装Spring

mysql通过frm和ibd文件恢复表_mysql5.7根据.frm和.ibd文件恢复表结构和数据

《mysql通过frm和ibd文件恢复表_mysql5.7根据.frm和.ibd文件恢复表结构和数据》文章主要介绍了如何从.frm和.ibd文件恢复MySQLInnoDB表结构和数据,需要的朋友可以参... 目录一、恢复表结构二、恢复表数据补充方法一、恢复表结构(从 .frm 文件)方法 1:使用 mysq

mysql8.0无备份通过idb文件恢复数据的方法、idb文件修复和tablespace id不一致处理

《mysql8.0无备份通过idb文件恢复数据的方法、idb文件修复和tablespaceid不一致处理》文章描述了公司服务器断电后数据库故障的过程,作者通过查看错误日志、重新初始化数据目录、恢复备... 周末突然接到一位一年多没联系的妹妹打来电话,“刘哥,快来救救我”,我脑海瞬间冒出妙瓦底,电信火苲马扁.

golang获取prometheus数据(prometheus/client_golang包)

《golang获取prometheus数据(prometheus/client_golang包)》本文主要介绍了使用Go语言的prometheus/client_golang包来获取Prometheu... 目录1. 创建链接1.1 语法1.2 完整示例2. 简单查询2.1 语法2.2 完整示例3. 范围值

springMVC返回Http响应的实现

《springMVC返回Http响应的实现》本文主要介绍了在SpringBoot中使用@Controller、@ResponseBody和@RestController注解进行HTTP响应返回的方法,... 目录一、返回页面二、@Controller和@ResponseBody与RestController

JAVA集成本地部署的DeepSeek的图文教程

《JAVA集成本地部署的DeepSeek的图文教程》本文主要介绍了JAVA集成本地部署的DeepSeek的图文教程,包含配置环境变量及下载DeepSeek-R1模型并启动,具有一定的参考价值,感兴趣的... 目录一、下载部署DeepSeek1.下载ollama2.下载DeepSeek-R1模型并启动 二、J

springboot rocketmq配置生产者和消息者的步骤

《springbootrocketmq配置生产者和消息者的步骤》本文介绍了如何在SpringBoot中集成RocketMQ,包括添加依赖、配置application.yml、创建生产者和消费者,并展... 目录1. 添加依赖2. 配置application.yml3. 创建生产者4. 创建消费者5. 使用在

Spring Retry 实现乐观锁重试实践记录

《SpringRetry实现乐观锁重试实践记录》本文介绍了在秒杀商品SKU表中使用乐观锁和MybatisPlus配置乐观锁的方法,并分析了测试环境和生产环境的隔离级别对乐观锁的影响,通过简单验证,... 目录一、场景分析 二、简单验证 2.1、可重复读 2.2、读已提交 三、最佳实践 3.1、配置重试模板

Spring中@Lazy注解的使用技巧与实例解析

《Spring中@Lazy注解的使用技巧与实例解析》@Lazy注解在Spring框架中用于延迟Bean的初始化,优化应用启动性能,它不仅适用于@Bean和@Component,还可以用于注入点,通过将... 目录一、@Lazy注解的作用(一)延迟Bean的初始化(二)与@Autowired结合使用二、实例解