postgres源码解析54 Brin Index--1

2023-11-03 13:20

本文主要是介绍postgres源码解析54 Brin Index--1,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Brin Index简介

brin index是Block range Index的缩写,顾名思义该索引是指块范围索引,该索引适合在超大表中进行过滤性扫描。基本的思路是追踪heap页域的最大值与最小值,用于过滤不符合条件的数据块。以下图为例,右边的堆表包含三个block,第一个block中有4个tuple,字段上的值分别是1、3、5、7。因此,与这个block相对应的Brin的元组就记录了 block的最小值1,最大值7。同理,2、4、6、8的最小值是2,最大值是8;12、11、14、13的最小值是10,最大值是14。这样就获得了一个 Brin index。
在这里插入图片描述
在执行带有条件的查询时,就可以利用Brin记录的这些信息,找到相应的block,同时滤掉大部分block,从而起到Index的作用。Brin Index是一种非常直观简单的Index。

关键数据结构

在这里插入图片描述

brin索引创建对应的handler,定义索引处理函数和属性
/** BRIN handler function: return IndexAmRoutine with access method parameters* and callbacks.*/
Datum
brinhandler(PG_FUNCTION_ARGS)
{IndexAmRoutine *amroutine = makeNode(IndexAmRoutine);amroutine->amstrategies = 0;amroutine->amsupport = BRIN_LAST_OPTIONAL_PROCNUM;amroutine->amcanorder = false;amroutine->amcanorderbyop = false;amroutine->amcanbackward = false;amroutine->amcanunique = false;amroutine->amcanmulticol = true;amroutine->amoptionalkey = true;amroutine->amsearcharray = false;amroutine->amsearchnulls = true;amroutine->amstorage = true;amroutine->amclusterable = false;amroutine->ampredlocks = false;amroutine->amcanparallel = false;amroutine->amcaninclude = false;amroutine->amkeytype = InvalidOid;amroutine->ambuild = brinbuild;amroutine->ambuildempty = brinbuildempty;amroutine->aminsert = brininsert;amroutine->ambulkdelete = brinbulkdelete;amroutine->amvacuumcleanup = brinvacuumcleanup;amroutine->amcanreturn = NULL;amroutine->amcostestimate = brincostestimate;amroutine->amoptions = brinoptions;amroutine->amproperty = NULL;amroutine->ambuildphasename = NULL;amroutine->amvalidate = brinvalidate;amroutine->ambeginscan = brinbeginscan;amroutine->amrescan = brinrescan;amroutine->amgettuple = NULL;amroutine->amgetbitmap = bringetbitmap;amroutine->amendscan = brinendscan;amroutine->ammarkpos = NULL;amroutine->amrestrpos = NULL;amroutine->amestimateparallelscan = NULL;amroutine->aminitparallelscan = NULL;amroutine->amparallelrescan = NULL;PG_RETURN_POINTER(amroutine);
}

Brin Index页格式

brin文件页有如下三种类型:元数据页,映射页与常规页类型
/* special space on all BRIN pages stores a "type" identifier */
#define		BRIN_PAGETYPE_META			0xF091
#define		BRIN_PAGETYPE_REVMAP		0xF092
#define		BRIN_PAGETYPE_REGULAR		0xF093每个brin文件页含有一段特殊的空间BrinSpecialSpace,用于记录类型与标识信息
/** Special area of BRIN pages.** We define it in this odd way so that it always occupies the last* MAXALIGN-sized element of each page.*/
typedef struct BrinSpecialSpace
{uint16		vector[MAXALIGN(1) / sizeof(uint16)];
} BrinSpecialSpace;/* flags for BrinSpecialSpace */
#define		BRIN_EVACUATE_PAGE			(1 << 0)通过如下宏定义从BrinSpecialSpace空间中获取页类型与标识信息
#define BrinPageType(page)		\(((BrinSpecialSpace *)		\PageGetSpecialPointer(page))->vector[MAXALIGN(1) / sizeof(uint16) - 1])#define BrinPageFlags(page)		\(((BrinSpecialSpace *)		\PageGetSpecialPointer(page))->vector[MAXALIGN(1) / sizeof(uint16) - 2])brin页类型的判断可通过调用如下宏实现:
#define BRIN_IS_META_PAGE(page) (BrinPageType(page) == BRIN_PAGETYPE_META)
#define BRIN_IS_REVMAP_PAGE(page) (BrinPageType(page) == BRIN_PAGETYPE_REVMAP)
#define BRIN_IS_REGULAR_PAGE(page) (BrinPageType(page) == BRIN_PAGETYPE_REGULAR)

在这里插入图片描述
在这里插入图片描述

void
brin_page_init(Page page, uint16 type)
{PageInit(page, BLCKSZ, sizeof(BrinSpecialSpace));BrinPageType(page) = type;
}------------------------------------------------------------------------------------------------------------
void
PageInit(Page page, Size pageSize, Size specialSize)
{PageHeader	p = (PageHeader) page;specialSize = MAXALIGN(specialSize);Assert(pageSize == BLCKSZ);Assert(pageSize > specialSize + SizeOfPageHeaderData);/* Make sure all fields of page are zero, as well as unused space */MemSet(p, 0, pageSize);p->pd_flags = 0;p->pd_lower = SizeOfPageHeaderData;p->pd_upper = pageSize - specialSize;p->pd_special = pageSize - specialSize;PageSetPageSizeAndVersion(page, pageSize, PG_PAGE_LAYOUT_VERSION);/* p->pd_prune_xid = InvalidTransactionId;		done by above MemSet */
}

这篇关于postgres源码解析54 Brin Index--1的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/338459

相关文章

使用Python实现批量访问URL并解析XML响应功能

《使用Python实现批量访问URL并解析XML响应功能》在现代Web开发和数据抓取中,批量访问URL并解析响应内容是一个常见的需求,本文将详细介绍如何使用Python实现批量访问URL并解析XML响... 目录引言1. 背景与需求2. 工具方法实现2.1 单URL访问与解析代码实现代码说明2.2 示例调用

SSID究竟是什么? WiFi网络名称及工作方式解析

《SSID究竟是什么?WiFi网络名称及工作方式解析》SID可以看作是无线网络的名称,类似于有线网络中的网络名称或者路由器的名称,在无线网络中,设备通过SSID来识别和连接到特定的无线网络... 当提到 Wi-Fi 网络时,就避不开「SSID」这个术语。简单来说,SSID 就是 Wi-Fi 网络的名称。比如

SpringCloud配置动态更新原理解析

《SpringCloud配置动态更新原理解析》在微服务架构的浩瀚星海中,服务配置的动态更新如同魔法一般,能够让应用在不重启的情况下,实时响应配置的变更,SpringCloud作为微服务架构中的佼佼者,... 目录一、SpringBoot、Cloud配置的读取二、SpringCloud配置动态刷新三、更新@R

使用Java解析JSON数据并提取特定字段的实现步骤(以提取mailNo为例)

《使用Java解析JSON数据并提取特定字段的实现步骤(以提取mailNo为例)》在现代软件开发中,处理JSON数据是一项非常常见的任务,无论是从API接口获取数据,还是将数据存储为JSON格式,解析... 目录1. 背景介绍1.1 jsON简介1.2 实际案例2. 准备工作2.1 环境搭建2.1.1 添加

Java汇编源码如何查看环境搭建

《Java汇编源码如何查看环境搭建》:本文主要介绍如何在IntelliJIDEA开发环境中搭建字节码和汇编环境,以便更好地进行代码调优和JVM学习,首先,介绍了如何配置IntelliJIDEA以方... 目录一、简介二、在IDEA开发环境中搭建汇编环境2.1 在IDEA中搭建字节码查看环境2.1.1 搭建步

在C#中合并和解析相对路径方式

《在C#中合并和解析相对路径方式》Path类提供了几个用于操作文件路径的静态方法,其中包括Combine方法和GetFullPath方法,Combine方法将两个路径合并在一起,但不会解析包含相对元素... 目录C#合并和解析相对路径System.IO.Path类幸运的是总结C#合并和解析相对路径对于 C

Java解析JSON的六种方案

《Java解析JSON的六种方案》这篇文章介绍了6种JSON解析方案,包括Jackson、Gson、FastJSON、JsonPath、、手动解析,分别阐述了它们的功能特点、代码示例、高级功能、优缺点... 目录前言1. 使用 Jackson:业界标配功能特点代码示例高级功能优缺点2. 使用 Gson:轻量

Java如何接收并解析HL7协议数据

《Java如何接收并解析HL7协议数据》文章主要介绍了HL7协议及其在医疗行业中的应用,详细描述了如何配置环境、接收和解析数据,以及与前端进行交互的实现方法,文章还分享了使用7Edit工具进行调试的经... 目录一、前言二、正文1、环境配置2、数据接收:HL7Monitor3、数据解析:HL7Busines

python解析HTML并提取span标签中的文本

《python解析HTML并提取span标签中的文本》在网页开发和数据抓取过程中,我们经常需要从HTML页面中提取信息,尤其是span元素中的文本,span标签是一个行内元素,通常用于包装一小段文本或... 目录一、安装相关依赖二、html 页面结构三、使用 BeautifulSoup javascript

网页解析 lxml 库--实战

lxml库使用流程 lxml 是 Python 的第三方解析库,完全使用 Python 语言编写,它对 XPath表达式提供了良好的支 持,因此能够了高效地解析 HTML/XML 文档。本节讲解如何通过 lxml 库解析 HTML 文档。 pip install lxml lxm| 库提供了一个 etree 模块,该模块专门用来解析 HTML/XML 文档,下面来介绍一下 lxml 库