协助报表开发之 MongoDB join 交叉汇总 位数比较

2024-03-25 11:08

本文主要是介绍协助报表开发之 MongoDB join 交叉汇总 位数比较,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

其他mongodb计算的文章

http://c.raqsoft.com.cn/article/1568626730687?r=CGQ

协助 mongodb 计算之数位比较:http://c.raqsoft.com.cn/article/1568597259340?r=CGQ

协助 MongoDB 计算之交叉汇总

http://c.raqsoft.com.cn/article/1568594893453?r=CGQ

 

 

 

 

 

处理多样性数据源是报表开发中的常见问题,而常见的 JasperReport 等报表工具本身却难以应付,比如展现两个 MongoDB 集合连接的结果。虽然 JasperReport 有 virtual data source 或 table join,但这些功能只在商业版或高端版本出现,在免费版中实现的难度很大。而且这些功能只支持两个数据源的连接,要实现多连接则麻烦得多。另外,这些功能只能基于图形化界面操作,对连接后的数据无法进行类似 SQL 的结构化计算。

       集算器 SPL 语言具有面向结构化处理的强计算引擎,支持多样性数据源,集成简单,可以协助不同报表工具方便地实现此类需求,下面用例子说明。

       Sales和 emp 是 MongoDB 中的两个集合,sales 中的字段 SellerId 逻辑上相当于外键,指向 emp 的 EId 字段,现在需要按时间段查询出 sales 中的订单,并和 emp 进行左连接,最后在报表中展现。部分源数据如下:

   集合sales

OrderIDClientSellerIdAmountOrderDate
26TAS12142.42009-08-05
27HP13538.62010-08-06
28DY11307.22010-08-07
29WVF194202010-08-08
30UFS181200.82009-08-09
31SWFR151488.82010-08-12
32JFS34682009-08-13

集合emp

EIdStateDeptNameGenderSalaryBirthday
2New YorkFinanceAshleyF110011980-07-19
3New MexicoSalesRachelF90001970-12-17
4TexasHREmilyF70001985-03-07
5TexasR&DAshleyF160001975-05-13
6CaliforniaSalesMatthewM110001984-07-07
7IllinoisSalesAlexisF90001972-08-16

使用集算器SPL的代码如下:

 A
1=mongo_open("mongodb://localhost:27017/test?user=root&password=sa")
2=mongo_shell(A1,"sales.find({$and:[{OrderDate:{$gte:'"+string(begin)+"'}},{  OrderDate:{ $lte:'"+string(end)+"'}} ] },{_id:0} )").fetch()
3=mongo_shell(A1,"emp.find(,,"{_id:0}").fetch()
4>mongo_close(A1)
5=join@1(A2:sales,SellerId;A3:emp,EId)
6=A5.new(sales.OrderID:OrderID,sales.Client:Client,sales.Amount:Amount,sales.OrderDate:OrderDate,emp.Name:Name,emp.Dept:Dept,emp.Gender:Gender)
7result   A6

A1: 连接 MongoDB,连接字格式为 mongo://ip:port/db?arg=value&…

A2: 使用 find 函数从集合 sales 中查询出某时间段的记录,取出 _id 之外的所有字段。其中查询条件中的 begin 和 end 是来自报表的外部参数,分别表示 OrderDate 的起始时间和终止时间。

函数 find 返回的是游标,并不会把数据直接读入内存,因此能够很好地支持大数据量。类似的,还可以用 skip、sort、conj 等函数继续操作游标,直到遇到函数 fetch、groups,或语句 for 时才会真正取数。本例直接用函数 fetch() 将数据读入内存,假如时间段是 2009-01-01 到 2009-12-31,则 A2 的计算结果如下:

a_100png

A3: 使用 find 函数从集合 carInfo 中取数,形成游标。过滤条件是空,取出 _id 之外的所有字段,结果如下:

a_101png

A4: 关闭 MongoDB。

A5: 将 A2 和 A3 进行左连接,连接字段是 A2 的 SellerId 和 A3 的 Eld,直观起见,连接后的两部分数据分别命名为 sales 和 emp。函数 join 执行连接计算,选项 @1 表示左连接,计算结果如下图左侧:

a_102png

可以看到,由于是左连接,因此 sales 中部分 SellerId 无法在 emp 中找到对应的记录。如果想进行全连接,可以使用选项 @f,无选项则表示内连接。

A6: 执行连接操作,从连接的结果中取出需要的字段,并用函数 new 组成二维表。比如sales.OrderID:OrderID表示从 A5 取出 sales.OrderID 字段,重命名为 OrderID(报表工具无法识别 sales.OrderID 这样的字段名)。计算结果如下:

a_103png

到此为止,报表需要的数据就全部计算出来了。
A7: 将 A6 中的二维表返回报表工具。
集算器对外提供 JDBC 接口,报表工具会将集算器识别为普通数据库,集成方案请参考相关文档。

接下来以 JasperReport 为例设计报表,表样如下:

a_104png

 需要定义两个报表参数 Pbegin、Pend,分别对应集算器中的两个参数。预览后可以看到报表结果:

a_105png

       报表调用集算器的方法和调用存储过程一样,此例中可以将本脚本保存为 mongodbJoin.dfx,在 JasperReport 的 SQL 设计器中可以用mongodbJoin $P{pbegin},$P{pend}来调用。

       简言之,SPL 从 MongoDB 获取多个集合数据后,将它们通过 join 函数进行连接计算,再通过函数 new 按需求将数据生成序表,供其它的报表工具展示。通过 SPL 对多个集合进行 join 关联,大大简化了对 MongoDB 数据的操作,有利于与其它报表工具的方便集成。

这篇关于协助报表开发之 MongoDB join 交叉汇总 位数比较的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/844792

相关文章

基于Qt开发一个简单的OFD阅读器

《基于Qt开发一个简单的OFD阅读器》这篇文章主要为大家详细介绍了如何使用Qt框架开发一个功能强大且性能优异的OFD阅读器,文中的示例代码讲解详细,有需要的小伙伴可以参考一下... 目录摘要引言一、OFD文件格式解析二、文档结构解析三、页面渲染四、用户交互五、性能优化六、示例代码七、未来发展方向八、结论摘要

Java 枚举的常用技巧汇总

《Java枚举的常用技巧汇总》在Java中,枚举类型是一种特殊的数据类型,允许定义一组固定的常量,默认情况下,toString方法返回枚举常量的名称,本文提供了一个完整的代码示例,展示了如何在Jav... 目录一、枚举的基本概念1. 什么是枚举?2. 基本枚举示例3. 枚举的优势二、枚举的高级用法1. 枚举

在 VSCode 中配置 C++ 开发环境的详细教程

《在VSCode中配置C++开发环境的详细教程》本文详细介绍了如何在VisualStudioCode(VSCode)中配置C++开发环境,包括安装必要的工具、配置编译器、设置调试环境等步骤,通... 目录如何在 VSCode 中配置 C++ 开发环境:详细教程1. 什么是 VSCode?2. 安装 VSCo

C#图表开发之Chart详解

《C#图表开发之Chart详解》C#中的Chart控件用于开发图表功能,具有Series和ChartArea两个重要属性,Series属性是SeriesCollection类型,包含多个Series对... 目录OverviChina编程ewSeries类总结OverviewC#中,开发图表功能的控件是Char

鸿蒙开发搭建flutter适配的开发环境

《鸿蒙开发搭建flutter适配的开发环境》文章详细介绍了在Windows系统上如何创建和运行鸿蒙Flutter项目,包括使用flutterdoctor检测环境、创建项目、编译HAP包以及在真机上运... 目录环境搭建创建运行项目打包项目总结环境搭建1.安装 DevEco Studio NEXT IDE

Python开发围棋游戏的实例代码(实现全部功能)

《Python开发围棋游戏的实例代码(实现全部功能)》围棋是一种古老而复杂的策略棋类游戏,起源于中国,已有超过2500年的历史,本文介绍了如何用Python开发一个简单的围棋游戏,实例代码涵盖了游戏的... 目录1. 围棋游戏概述1.1 游戏规则1.2 游戏设计思路2. 环境准备3. 创建棋盘3.1 棋盘类

百度/小米/滴滴/京东,中台架构比较

小米中台建设实践 01 小米的三大中台建设:业务+数据+技术 业务中台--从业务说起 在中台建设中,需要规范化的服务接口、一致整合化的数据、容器化的技术组件以及弹性的基础设施。并结合业务情况,判定是否真的需要中台。 小米参考了业界优秀的案例包括移动中台、数据中台、业务中台、技术中台等,再结合其业务发展历程及业务现状,整理了中台架构的核心方法论,一是企业如何共享服务,二是如何为业务提供便利。

这15个Vue指令,让你的项目开发爽到爆

1. V-Hotkey 仓库地址: github.com/Dafrok/v-ho… Demo: 戳这里 https://dafrok.github.io/v-hotkey 安装: npm install --save v-hotkey 这个指令可以给组件绑定一个或多个快捷键。你想要通过按下 Escape 键后隐藏某个组件,按住 Control 和回车键再显示它吗?小菜一碟: <template

Hadoop企业开发案例调优场景

需求 (1)需求:从1G数据中,统计每个单词出现次数。服务器3台,每台配置4G内存,4核CPU,4线程。 (2)需求分析: 1G / 128m = 8个MapTask;1个ReduceTask;1个mrAppMaster 平均每个节点运行10个 / 3台 ≈ 3个任务(4    3    3) HDFS参数调优 (1)修改:hadoop-env.sh export HDFS_NAMENOD

嵌入式QT开发:构建高效智能的嵌入式系统

摘要: 本文深入探讨了嵌入式 QT 相关的各个方面。从 QT 框架的基础架构和核心概念出发,详细阐述了其在嵌入式环境中的优势与特点。文中分析了嵌入式 QT 的开发环境搭建过程,包括交叉编译工具链的配置等关键步骤。进一步探讨了嵌入式 QT 的界面设计与开发,涵盖了从基本控件的使用到复杂界面布局的构建。同时也深入研究了信号与槽机制在嵌入式系统中的应用,以及嵌入式 QT 与硬件设备的交互,包括输入输出设