postgres源码解析54 Brin Index--1

2023-11-03 13:20

本文主要是介绍postgres源码解析54 Brin Index--1,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Brin Index简介

brin index是Block range Index的缩写,顾名思义该索引是指块范围索引,该索引适合在超大表中进行过滤性扫描。基本的思路是追踪heap页域的最大值与最小值,用于过滤不符合条件的数据块。以下图为例,右边的堆表包含三个block,第一个block中有4个tuple,字段上的值分别是1、3、5、7。因此,与这个block相对应的Brin的元组就记录了 block的最小值1,最大值7。同理,2、4、6、8的最小值是2,最大值是8;12、11、14、13的最小值是10,最大值是14。这样就获得了一个 Brin index。
在这里插入图片描述
在执行带有条件的查询时,就可以利用Brin记录的这些信息,找到相应的block,同时滤掉大部分block,从而起到Index的作用。Brin Index是一种非常直观简单的Index。

关键数据结构

在这里插入图片描述

brin索引创建对应的handler,定义索引处理函数和属性
/** BRIN handler function: return IndexAmRoutine with access method parameters* and callbacks.*/
Datum
brinhandler(PG_FUNCTION_ARGS)
{IndexAmRoutine *amroutine = makeNode(IndexAmRoutine);amroutine->amstrategies = 0;amroutine->amsupport = BRIN_LAST_OPTIONAL_PROCNUM;amroutine->amcanorder = false;amroutine->amcanorderbyop = false;amroutine->amcanbackward = false;amroutine->amcanunique = false;amroutine->amcanmulticol = true;amroutine->amoptionalkey = true;amroutine->amsearcharray = false;amroutine->amsearchnulls = true;amroutine->amstorage = true;amroutine->amclusterable = false;amroutine->ampredlocks = false;amroutine->amcanparallel = false;amroutine->amcaninclude = false;amroutine->amkeytype = InvalidOid;amroutine->ambuild = brinbuild;amroutine->ambuildempty = brinbuildempty;amroutine->aminsert = brininsert;amroutine->ambulkdelete = brinbulkdelete;amroutine->amvacuumcleanup = brinvacuumcleanup;amroutine->amcanreturn = NULL;amroutine->amcostestimate = brincostestimate;amroutine->amoptions = brinoptions;amroutine->amproperty = NULL;amroutine->ambuildphasename = NULL;amroutine->amvalidate = brinvalidate;amroutine->ambeginscan = brinbeginscan;amroutine->amrescan = brinrescan;amroutine->amgettuple = NULL;amroutine->amgetbitmap = bringetbitmap;amroutine->amendscan = brinendscan;amroutine->ammarkpos = NULL;amroutine->amrestrpos = NULL;amroutine->amestimateparallelscan = NULL;amroutine->aminitparallelscan = NULL;amroutine->amparallelrescan = NULL;PG_RETURN_POINTER(amroutine);
}

Brin Index页格式

brin文件页有如下三种类型:元数据页,映射页与常规页类型
/* special space on all BRIN pages stores a "type" identifier */
#define		BRIN_PAGETYPE_META			0xF091
#define		BRIN_PAGETYPE_REVMAP		0xF092
#define		BRIN_PAGETYPE_REGULAR		0xF093每个brin文件页含有一段特殊的空间BrinSpecialSpace,用于记录类型与标识信息
/** Special area of BRIN pages.** We define it in this odd way so that it always occupies the last* MAXALIGN-sized element of each page.*/
typedef struct BrinSpecialSpace
{uint16		vector[MAXALIGN(1) / sizeof(uint16)];
} BrinSpecialSpace;/* flags for BrinSpecialSpace */
#define		BRIN_EVACUATE_PAGE			(1 << 0)通过如下宏定义从BrinSpecialSpace空间中获取页类型与标识信息
#define BrinPageType(page)		\(((BrinSpecialSpace *)		\PageGetSpecialPointer(page))->vector[MAXALIGN(1) / sizeof(uint16) - 1])#define BrinPageFlags(page)		\(((BrinSpecialSpace *)		\PageGetSpecialPointer(page))->vector[MAXALIGN(1) / sizeof(uint16) - 2])brin页类型的判断可通过调用如下宏实现:
#define BRIN_IS_META_PAGE(page) (BrinPageType(page) == BRIN_PAGETYPE_META)
#define BRIN_IS_REVMAP_PAGE(page) (BrinPageType(page) == BRIN_PAGETYPE_REVMAP)
#define BRIN_IS_REGULAR_PAGE(page) (BrinPageType(page) == BRIN_PAGETYPE_REGULAR)

在这里插入图片描述
在这里插入图片描述

void
brin_page_init(Page page, uint16 type)
{PageInit(page, BLCKSZ, sizeof(BrinSpecialSpace));BrinPageType(page) = type;
}------------------------------------------------------------------------------------------------------------
void
PageInit(Page page, Size pageSize, Size specialSize)
{PageHeader	p = (PageHeader) page;specialSize = MAXALIGN(specialSize);Assert(pageSize == BLCKSZ);Assert(pageSize > specialSize + SizeOfPageHeaderData);/* Make sure all fields of page are zero, as well as unused space */MemSet(p, 0, pageSize);p->pd_flags = 0;p->pd_lower = SizeOfPageHeaderData;p->pd_upper = pageSize - specialSize;p->pd_special = pageSize - specialSize;PageSetPageSizeAndVersion(page, pageSize, PG_PAGE_LAYOUT_VERSION);/* p->pd_prune_xid = InvalidTransactionId;		done by above MemSet */
}

这篇关于postgres源码解析54 Brin Index--1的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/338459

相关文章

线上Java OOM问题定位与解决方案超详细解析

《线上JavaOOM问题定位与解决方案超详细解析》OOM是JVM抛出的错误,表示内存分配失败,:本文主要介绍线上JavaOOM问题定位与解决方案的相关资料,文中通过代码介绍的非常详细,需要的朋... 目录一、OOM问题核心认知1.1 OOM定义与技术定位1.2 OOM常见类型及技术特征二、OOM问题定位工具

深度解析Python中递归下降解析器的原理与实现

《深度解析Python中递归下降解析器的原理与实现》在编译器设计、配置文件处理和数据转换领域,递归下降解析器是最常用且最直观的解析技术,本文将详细介绍递归下降解析器的原理与实现,感兴趣的小伙伴可以跟随... 目录引言:解析器的核心价值一、递归下降解析器基础1.1 核心概念解析1.2 基本架构二、简单算术表达

深度解析Java @Serial 注解及常见错误案例

《深度解析Java@Serial注解及常见错误案例》Java14引入@Serial注解,用于编译时校验序列化成员,替代传统方式解决运行时错误,适用于Serializable类的方法/字段,需注意签... 目录Java @Serial 注解深度解析1. 注解本质2. 核心作用(1) 主要用途(2) 适用位置3

Java MCP 的鉴权深度解析

《JavaMCP的鉴权深度解析》文章介绍JavaMCP鉴权的实现方式,指出客户端可通过queryString、header或env传递鉴权信息,服务器端支持工具单独鉴权、过滤器集中鉴权及启动时鉴权... 目录一、MCP Client 侧(负责传递,比较简单)(1)常见的 mcpServers json 配置

从原理到实战解析Java Stream 的并行流性能优化

《从原理到实战解析JavaStream的并行流性能优化》本文给大家介绍JavaStream的并行流性能优化:从原理到实战的全攻略,本文通过实例代码给大家介绍的非常详细,对大家的学习或工作具有一定的... 目录一、并行流的核心原理与适用场景二、性能优化的核心策略1. 合理设置并行度:打破默认阈值2. 避免装箱

Maven中生命周期深度解析与实战指南

《Maven中生命周期深度解析与实战指南》这篇文章主要为大家详细介绍了Maven生命周期实战指南,包含核心概念、阶段详解、SpringBoot特化场景及企业级实践建议,希望对大家有一定的帮助... 目录一、Maven 生命周期哲学二、default生命周期核心阶段详解(高频使用)三、clean生命周期核心阶

深入解析C++ 中std::map内存管理

《深入解析C++中std::map内存管理》文章详解C++std::map内存管理,指出clear()仅删除元素可能不释放底层内存,建议用swap()与空map交换以彻底释放,针对指针类型需手动de... 目录1️、基本清空std::map2️、使用 swap 彻底释放内存3️、map 中存储指针类型的对象

Java Scanner类解析与实战教程

《JavaScanner类解析与实战教程》JavaScanner类(java.util包)是文本输入解析工具,支持基本类型和字符串读取,基于Readable接口与正则分隔符实现,适用于控制台、文件输... 目录一、核心设计与工作原理1.底层依赖2.解析机制A.核心逻辑基于分隔符(delimiter)和模式匹

Java+AI驱动实现PDF文件数据提取与解析

《Java+AI驱动实现PDF文件数据提取与解析》本文将和大家分享一套基于AI的体检报告智能评估方案,详细介绍从PDF上传、内容提取到AI分析、数据存储的全流程自动化实现方法,感兴趣的可以了解下... 目录一、核心流程:从上传到评估的完整链路二、第一步:解析 PDF,提取体检报告内容1. 引入依赖2. 封装

深度解析Python yfinance的核心功能和高级用法

《深度解析Pythonyfinance的核心功能和高级用法》yfinance是一个功能强大且易于使用的Python库,用于从YahooFinance获取金融数据,本教程将深入探讨yfinance的核... 目录yfinance 深度解析教程 (python)1. 简介与安装1.1 什么是 yfinance?