深入理解 GC 原理、调度与调优

2024-08-26 17:04

本文主要是介绍深入理解 GC 原理、调度与调优,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1. 内存管理

        操作系统将虚拟内存分隔为虚拟页(大小为 4KB),当进程向操作系统申请内存时,操作系统通常以页为单位分配内存。即使进程申请 3KB 内存,操作系统也会分配一个 4KB 虚拟页给进程。而程序开发时申请的内存往往都比较小,甚至只有几个字节,总不能也分配一个 4KB 虚拟页吧。

1.1 如何设计动态内存分配器

        Go 语言自己实现的内存分配器一次向操作系统申请一块大内存(如64MB)。当 Go 程序申请内存时,只需要向 Go 语言内存分配器申请即可。那么该如何设计内存分配器呢?

        因为内存分配与释放的时机、大小等完全是随机的,所以随着内存的分配与释放,最初的整块大内存将会被 “分割” 为若干个小块内存。有些小块内存处于已分配状态,有些小块内存处于空闲状态。也就是说,需要额外的内存空间来维护这些信息(内存块的大小以及状态)。如何维护这些信息呢?

        第一种思路是,当程序申请内存时,多分配几个字节用于维护内存块状态以及内存块大小。

        第二种思路是,单独维护一份二进制数据,使用 1 比特存储每一个 8 字节内存的分配状态,其中 1 表示内存已分配,0 表示内存空闲。内存分配情况示意图如下所示:

1.2 Go 语言内存分配器

        Go 语言内存分配的基本单元是 mspan,每一个 mspan 维护着若干个页内存,当 Go 程序申请内存时,底层实际上是从 mspan 中查找分配的。结构体 mspan 的定义如下所示:

type mspan struct {//页数, Go 语言定义页大小为 8KBnpage    uintprt//用于记录内存分配状态的位allocBits *gcBits//表示该 mspan 负责分配的内存大小elemsize    uintprt
}

结构体 mspan 的字段含义如下:

1)npages : 表示该 mspan 管理了多少页内存,Go 语言定义的页大小为 8 KB。

2)allocBits: 该字段用于维护当前 mspan 所有内存的分配状态,Go 语言使用一个比特记录每一个8 字节内存的分配状态,0 表示空闲状态,1 表示已分配状态。

3)elemsize: 为 提升空闲内存的查找效率,Go 语言将 mspan 分为了多种类型,第一种类型的 mspan 仅用于分配固定大小的内存块,该字段表示当前 mspan 负责分配的内存块大小。

Go 语言总共定义了 67 种类型的 mspan,如下所示:

1.3 Go 语言内存管理

Go 语言内存管理还是比较复杂的,以申请内存为例,整个流程涉及多个对象,并且这些对象相互依赖,

1.4 内存逃逸

        一般函数内声明的局部变量应该存储在栈内存中,并且随着函数的调用和返回,该局部变量也会同步分配和释放。然而,Go 语言稍有不同,因为 Go 语言存在内存逃逸情况,在某些情况下,局部变量也有可能存储在堆内存中。

         为什么会有内存逃逸呢?举个例子,某个函数内部声明了一个局部变量,但是该函数返回了局部变量的地址。这种语法在其他语言,比如 C 语言,是不允许的,因为函数返回后,该局部变量的地址也会被释放。但是 Go 语言允许这种语法,只是这时候 Go 语言会将该局部变量存储在堆内存中,即该局部变量逃逸到了堆内存,如下所示:

package main
import "fmt"
func main(){ret := test()fmt.Println(ret)
}func test() *int{var num = 10return &num
}

        那还有哪些情况会引起内存逃逸呢?如果将一个局部变量的地址赋值给全局散列表或者切片,该局部变量也会逃逸到堆内存。再者,如果一个局部变量需要占用大量内存,这时候存储在栈内存是不是也就不太合适了,毕竟 Go 语言协程栈默认只有 2KB。

        那平时开发 Go 程序时,需要关注内存逃逸情况吗?一般来说是不需要的,只是需要清楚一点:逃逸到堆内存上的变量如果不再使用,将会被垃圾回收功能自动回收。

这篇关于深入理解 GC 原理、调度与调优的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1109163

相关文章

MySQL中的MVCC底层原理解读

《MySQL中的MVCC底层原理解读》本文详细介绍了MySQL中的多版本并发控制(MVCC)机制,包括版本链、ReadView以及在不同事务隔离级别下MVCC的工作原理,通过一个具体的示例演示了在可重... 目录简介ReadView版本链演示过程总结简介MVCC(Multi-Version Concurr

深入解析Spring TransactionTemplate 高级用法(示例代码)

《深入解析SpringTransactionTemplate高级用法(示例代码)》TransactionTemplate是Spring框架中一个强大的工具,它允许开发者以编程方式控制事务,通过... 目录1. TransactionTemplate 的核心概念2. 核心接口和类3. TransactionT

深入理解Apache Airflow 调度器(最新推荐)

《深入理解ApacheAirflow调度器(最新推荐)》ApacheAirflow调度器是数据管道管理系统的关键组件,负责编排dag中任务的执行,通过理解调度器的角色和工作方式,正确配置调度器,并... 目录什么是Airflow 调度器?Airflow 调度器工作机制配置Airflow调度器调优及优化建议最

一文带你理解Python中import机制与importlib的妙用

《一文带你理解Python中import机制与importlib的妙用》在Python编程的世界里,import语句是开发者最常用的工具之一,它就像一把钥匙,打开了通往各种功能和库的大门,下面就跟随小... 目录一、python import机制概述1.1 import语句的基本用法1.2 模块缓存机制1.

Redis主从/哨兵机制原理分析

《Redis主从/哨兵机制原理分析》本文介绍了Redis的主从复制和哨兵机制,主从复制实现了数据的热备份和负载均衡,而哨兵机制可以监控Redis集群,实现自动故障转移,哨兵机制通过监控、下线、选举和故... 目录一、主从复制1.1 什么是主从复制1.2 主从复制的作用1.3 主从复制原理1.3.1 全量复制

深入理解C语言的void*

《深入理解C语言的void*》本文主要介绍了C语言的void*,包括它的任意性、编译器对void*的类型检查以及需要显式类型转换的规则,具有一定的参考价值,感兴趣的可以了解一下... 目录一、void* 的类型任意性二、编译器对 void* 的类型检查三、需要显式类型转换占用的字节四、总结一、void* 的

深入理解Redis大key的危害及解决方案

《深入理解Redis大key的危害及解决方案》本文主要介绍了深入理解Redis大key的危害及解决方案,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着... 目录一、背景二、什么是大key三、大key评价标准四、大key 产生的原因与场景五、大key影响与危

Redis主从复制的原理分析

《Redis主从复制的原理分析》Redis主从复制通过将数据镜像到多个从节点,实现高可用性和扩展性,主从复制包括初次全量同步和增量同步两个阶段,为优化复制性能,可以采用AOF持久化、调整复制超时时间、... 目录Redis主从复制的原理主从复制概述配置主从复制数据同步过程复制一致性与延迟故障转移机制监控与维

SpringCloud配置动态更新原理解析

《SpringCloud配置动态更新原理解析》在微服务架构的浩瀚星海中,服务配置的动态更新如同魔法一般,能够让应用在不重启的情况下,实时响应配置的变更,SpringCloud作为微服务架构中的佼佼者,... 目录一、SpringBoot、Cloud配置的读取二、SpringCloud配置动态刷新三、更新@R

深入理解C++ 空类大小

《深入理解C++空类大小》本文主要介绍了C++空类大小,规定空类大小为1字节,主要是为了保证对象的唯一性和可区分性,满足数组元素地址连续的要求,下面就来了解一下... 目录1. 保证对象的唯一性和可区分性2. 满足数组元素地址连续的要求3. 与C++的对象模型和内存管理机制相适配查看类对象内存在C++中,规