深入理解 GC 原理、调度与调优

2024-08-26 17:04

本文主要是介绍深入理解 GC 原理、调度与调优,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

1. 内存管理

        操作系统将虚拟内存分隔为虚拟页(大小为 4KB),当进程向操作系统申请内存时,操作系统通常以页为单位分配内存。即使进程申请 3KB 内存,操作系统也会分配一个 4KB 虚拟页给进程。而程序开发时申请的内存往往都比较小,甚至只有几个字节,总不能也分配一个 4KB 虚拟页吧。

1.1 如何设计动态内存分配器

        Go 语言自己实现的内存分配器一次向操作系统申请一块大内存(如64MB)。当 Go 程序申请内存时,只需要向 Go 语言内存分配器申请即可。那么该如何设计内存分配器呢?

        因为内存分配与释放的时机、大小等完全是随机的,所以随着内存的分配与释放,最初的整块大内存将会被 “分割” 为若干个小块内存。有些小块内存处于已分配状态,有些小块内存处于空闲状态。也就是说,需要额外的内存空间来维护这些信息(内存块的大小以及状态)。如何维护这些信息呢?

        第一种思路是,当程序申请内存时,多分配几个字节用于维护内存块状态以及内存块大小。

        第二种思路是,单独维护一份二进制数据,使用 1 比特存储每一个 8 字节内存的分配状态,其中 1 表示内存已分配,0 表示内存空闲。内存分配情况示意图如下所示:

1.2 Go 语言内存分配器

        Go 语言内存分配的基本单元是 mspan,每一个 mspan 维护着若干个页内存,当 Go 程序申请内存时,底层实际上是从 mspan 中查找分配的。结构体 mspan 的定义如下所示:

type mspan struct {//页数, Go 语言定义页大小为 8KBnpage    uintprt//用于记录内存分配状态的位allocBits *gcBits//表示该 mspan 负责分配的内存大小elemsize    uintprt
}

结构体 mspan 的字段含义如下:

1)npages : 表示该 mspan 管理了多少页内存,Go 语言定义的页大小为 8 KB。

2)allocBits: 该字段用于维护当前 mspan 所有内存的分配状态,Go 语言使用一个比特记录每一个8 字节内存的分配状态,0 表示空闲状态,1 表示已分配状态。

3)elemsize: 为 提升空闲内存的查找效率,Go 语言将 mspan 分为了多种类型,第一种类型的 mspan 仅用于分配固定大小的内存块,该字段表示当前 mspan 负责分配的内存块大小。

Go 语言总共定义了 67 种类型的 mspan,如下所示:

1.3 Go 语言内存管理

Go 语言内存管理还是比较复杂的,以申请内存为例,整个流程涉及多个对象,并且这些对象相互依赖,

1.4 内存逃逸

        一般函数内声明的局部变量应该存储在栈内存中,并且随着函数的调用和返回,该局部变量也会同步分配和释放。然而,Go 语言稍有不同,因为 Go 语言存在内存逃逸情况,在某些情况下,局部变量也有可能存储在堆内存中。

         为什么会有内存逃逸呢?举个例子,某个函数内部声明了一个局部变量,但是该函数返回了局部变量的地址。这种语法在其他语言,比如 C 语言,是不允许的,因为函数返回后,该局部变量的地址也会被释放。但是 Go 语言允许这种语法,只是这时候 Go 语言会将该局部变量存储在堆内存中,即该局部变量逃逸到了堆内存,如下所示:

package main
import "fmt"
func main(){ret := test()fmt.Println(ret)
}func test() *int{var num = 10return &num
}

        那还有哪些情况会引起内存逃逸呢?如果将一个局部变量的地址赋值给全局散列表或者切片,该局部变量也会逃逸到堆内存。再者,如果一个局部变量需要占用大量内存,这时候存储在栈内存是不是也就不太合适了,毕竟 Go 语言协程栈默认只有 2KB。

        那平时开发 Go 程序时,需要关注内存逃逸情况吗?一般来说是不需要的,只是需要清楚一点:逃逸到堆内存上的变量如果不再使用,将会被垃圾回收功能自动回收。

这篇关于深入理解 GC 原理、调度与调优的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1109163

相关文章

Hadoop企业开发案例调优场景

需求 (1)需求:从1G数据中,统计每个单词出现次数。服务器3台,每台配置4G内存,4核CPU,4线程。 (2)需求分析: 1G / 128m = 8个MapTask;1个ReduceTask;1个mrAppMaster 平均每个节点运行10个 / 3台 ≈ 3个任务(4    3    3) HDFS参数调优 (1)修改:hadoop-env.sh export HDFS_NAMENOD

【前端学习】AntV G6-08 深入图形与图形分组、自定义节点、节点动画(下)

【课程链接】 AntV G6:深入图形与图形分组、自定义节点、节点动画(下)_哔哩哔哩_bilibili 本章十吾老师讲解了一个复杂的自定义节点中,应该怎样去计算和绘制图形,如何给一个图形制作不间断的动画,以及在鼠标事件之后产生动画。(有点难,需要好好理解) <!DOCTYPE html><html><head><meta charset="UTF-8"><title>06

认识、理解、分类——acm之搜索

普通搜索方法有两种:1、广度优先搜索;2、深度优先搜索; 更多搜索方法: 3、双向广度优先搜索; 4、启发式搜索(包括A*算法等); 搜索通常会用到的知识点:状态压缩(位压缩,利用hash思想压缩)。

深入探索协同过滤:从原理到推荐模块案例

文章目录 前言一、协同过滤1. 基于用户的协同过滤(UserCF)2. 基于物品的协同过滤(ItemCF)3. 相似度计算方法 二、相似度计算方法1. 欧氏距离2. 皮尔逊相关系数3. 杰卡德相似系数4. 余弦相似度 三、推荐模块案例1.基于文章的协同过滤推荐功能2.基于用户的协同过滤推荐功能 前言     在信息过载的时代,推荐系统成为连接用户与内容的桥梁。本文聚焦于

hdu4407(容斥原理)

题意:给一串数字1,2,......n,两个操作:1、修改第k个数字,2、查询区间[l,r]中与n互质的数之和。 解题思路:咱一看,像线段树,但是如果用线段树做,那么每个区间一定要记录所有的素因子,这样会超内存。然后我就做不来了。后来看了题解,原来是用容斥原理来做的。还记得这道题目吗?求区间[1,r]中与p互质的数的个数,如果不会的话就先去做那题吧。现在这题是求区间[l,r]中与n互质的数的和

搭建Kafka+zookeeper集群调度

前言 硬件环境 172.18.0.5        kafkazk1        Kafka+zookeeper                Kafka Broker集群 172.18.0.6        kafkazk2        Kafka+zookeeper                Kafka Broker集群 172.18.0.7        kafkazk3

【生成模型系列(初级)】嵌入(Embedding)方程——自然语言处理的数学灵魂【通俗理解】

【通俗理解】嵌入(Embedding)方程——自然语言处理的数学灵魂 关键词提炼 #嵌入方程 #自然语言处理 #词向量 #机器学习 #神经网络 #向量空间模型 #Siri #Google翻译 #AlexNet 第一节:嵌入方程的类比与核心概念【尽可能通俗】 嵌入方程可以被看作是自然语言处理中的“翻译机”,它将文本中的单词或短语转换成计算机能够理解的数学形式,即向量。 正如翻译机将一种语言

【C++高阶】C++类型转换全攻略:深入理解并高效应用

📝个人主页🌹:Eternity._ ⏩收录专栏⏪:C++ “ 登神长阶 ” 🤡往期回顾🤡:C++ 智能指针 🌹🌹期待您的关注 🌹🌹 ❀C++的类型转换 📒1. C语言中的类型转换📚2. C++强制类型转换⛰️static_cast🌞reinterpret_cast⭐const_cast🍁dynamic_cast 📜3. C++强制类型转换的原因📝

深入手撕链表

链表 分类概念单链表增尾插头插插入 删尾删头删删除 查完整实现带头不带头 双向链表初始化增尾插头插插入 删查完整代码 数组 分类 #mermaid-svg-qKD178fTiiaYeKjl {font-family:"trebuchet ms",verdana,arial,sans-serif;font-size:16px;fill:#333;}#mermaid-svg-

【编程底层思考】垃圾收集机制,GC算法,垃圾收集器类型概述

Java的垃圾收集(Garbage Collection,GC)机制是Java语言的一大特色,它负责自动管理内存的回收,释放不再使用的对象所占用的内存。以下是对Java垃圾收集机制的详细介绍: 一、垃圾收集机制概述: 对象存活判断:垃圾收集器定期检查堆内存中的对象,判断哪些对象是“垃圾”,即不再被任何引用链直接或间接引用的对象。内存回收:将判断为垃圾的对象占用的内存进行回收,以便重新使用。