Linux内核有什么之内存管理子系统有什么第二回 —— 单刀直入

2023-11-08 16:01

本文主要是介绍Linux内核有什么之内存管理子系统有什么第二回 —— 单刀直入,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

接前一篇文章:Linux内核有什么之内存管理子系统有什么第一回 —— 引言

一、单刀直入 —— 一切从malloc开始

想必大家都使用过malloc(),malloc的全称是memory allocation,中文叫做动态内存分配。其用于申请一块连续的指定大小的内存块区域以void *类型返回分配的内存区域地址。

一般的工程师尤其是上层应用工程师知道怎么用这个函数就可以了,如果再能知道它是从堆(heap)中分配,并且能够注意通过free()释放内存从而避免内存泄漏,就算是比较优秀的工程师了。但那是对于应用工程师而言的,对于底层内核工程师,要求远不止于此。我们要知道malloc()的底层机制,具体是怎样由上到下、由应用到内核的,在内核中都做了哪些工作,最终又是如何返回给应用的。

先来看一下malloc的定义。在Linux终端下通过man malloc查看其说明,如下所示:

名称

malloc

原型

#include <stdlib.h>

void *malloc(size_t size);

说明

malloc()函数分配size个字节,并返回一个指向已分配内存的指针。此分配到的内存并未初始化。如果大小为0,那么malloc()返回NULL,或者返回一个唯一的指针值,该值稍后可以成功传递给free()。

返回值

malloc()函数返回一个指向已分配内存的指针,该指针适合任何内置类型。出现错误时,这些函数返回NULL。成功调用malloc()且大小为零,也可能返回NULL。

默认情况下,Linux遵循乐观的内存分配策略。这意味着当mallo()返回非NULL时,不能保证内存真的可用。如果系统内存不足,一个或多个进程将被OOM杀手杀死。有关更多信息,请参阅proc(5)中/proc/sys/vm/overcommit_memory和/proc/sys/vm/oom_adj的描述,以及Linux内核源文件Documentation/vm/overcommit-accounting.rst。

通常,malloc()从堆中分配内存,并根据需要使用sbrk(2)调整堆的大小;当分配大于MMAP_THRESHOLD字节的内存块时,glibc malloc()实现使用mmap(2)将内存分配为私有匿名映射。MMAP_THRESHOLD默认为128kB,但可以使用mallopt(3)进行调整。

在Linux内核4.7之前,使用mmap(2)执行的分配不受RLIMIT_DATA资源限制的影响;自Linux内核 4.7以来,对于使用mmap(2)执行的分配,也强制执行了此限制。

为了避免多线程应用程序中的损坏,在内部使用互斥锁来保护这些函数所使用的内存管理数据结构。在线程同时分配和释放内存的多线程应用程序中,可能存在对这些互斥对象的争用。为了在多线程应用程序中可伸缩地处理内存分配,如果检测到互斥争用,glibc会创建额外的内存分配区域。每个arena都是一个大的内存区域,由系统内部分配(使用brk(2)或mmap(2)),并使用自己的互斥对象进行管理。

从上边man中对于malloc()的说明可以看到,通过malloc()申请一个堆内的空间,底层要么执行brk,要么执行mmap。

brk是一个系统调用,其入口函数是sys_brk;mmap也是一个系统调用,其入口是sys_mmap。

下一回开始对于这两个系统调用进行深入解析。

这篇关于Linux内核有什么之内存管理子系统有什么第二回 —— 单刀直入的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/370955

相关文章

linux hostname设置全过程

《linuxhostname设置全过程》:本文主要介绍linuxhostname设置全过程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录查询hostname设置步骤其它相关点hostid/etc/hostsEDChina编程A工具license破解注意事项总结以RHE

怎样通过分析GC日志来定位Java进程的内存问题

《怎样通过分析GC日志来定位Java进程的内存问题》:本文主要介绍怎样通过分析GC日志来定位Java进程的内存问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、GC 日志基础配置1. 启用详细 GC 日志2. 不同收集器的日志格式二、关键指标与分析维度1.

Linux中压缩、网络传输与系统监控工具的使用完整指南

《Linux中压缩、网络传输与系统监控工具的使用完整指南》在Linux系统管理中,压缩与传输工具是数据备份和远程协作的桥梁,而系统监控工具则是保障服务器稳定运行的眼睛,下面小编就来和大家详细介绍一下它... 目录引言一、压缩与解压:数据存储与传输的优化核心1. zip/unzip:通用压缩格式的便捷操作2.

Java内存分配与JVM参数详解(推荐)

《Java内存分配与JVM参数详解(推荐)》本文详解JVM内存结构与参数调整,涵盖堆分代、元空间、GC选择及优化策略,帮助开发者提升性能、避免内存泄漏,本文给大家介绍Java内存分配与JVM参数详解,... 目录引言JVM内存结构JVM参数概述堆内存分配年轻代与老年代调整堆内存大小调整年轻代与老年代比例元空

Linux中SSH服务配置的全面指南

《Linux中SSH服务配置的全面指南》作为网络安全工程师,SSH(SecureShell)服务的安全配置是我们日常工作中不可忽视的重要环节,本文将从基础配置到高级安全加固,全面解析SSH服务的各项参... 目录概述基础配置详解端口与监听设置主机密钥配置认证机制强化禁用密码认证禁止root直接登录实现双因素

在Linux终端中统计非二进制文件行数的实现方法

《在Linux终端中统计非二进制文件行数的实现方法》在Linux系统中,有时需要统计非二进制文件(如CSV、TXT文件)的行数,而不希望手动打开文件进行查看,例如,在处理大型日志文件、数据文件时,了解... 目录在linux终端中统计非二进制文件的行数技术背景实现步骤1. 使用wc命令2. 使用grep命令

Linux如何快速检查服务器的硬件配置和性能指标

《Linux如何快速检查服务器的硬件配置和性能指标》在运维和开发工作中,我们经常需要快速检查Linux服务器的硬件配置和性能指标,本文将以CentOS为例,介绍如何通过命令行快速获取这些关键信息,... 目录引言一、查询CPU核心数编程(几C?)1. 使用 nproc(最简单)2. 使用 lscpu(详细信

linux重启命令有哪些? 7个实用的Linux系统重启命令汇总

《linux重启命令有哪些?7个实用的Linux系统重启命令汇总》Linux系统提供了多种重启命令,常用的包括shutdown-r、reboot、init6等,不同命令适用于不同场景,本文将详细... 在管理和维护 linux 服务器时,完成系统更新、故障排查或日常维护后,重启系统往往是必不可少的步骤。本文

基于Linux的ffmpeg python的关键帧抽取

《基于Linux的ffmpegpython的关键帧抽取》本文主要介绍了基于Linux的ffmpegpython的关键帧抽取,实现以按帧或时间间隔抽取关键帧,文中通过示例代码介绍的非常详细,对大家的学... 目录1.FFmpeg的环境配置1) 创建一个虚拟环境envjavascript2) ffmpeg-py

C++高效内存池实现减少动态分配开销的解决方案

《C++高效内存池实现减少动态分配开销的解决方案》C++动态内存分配存在系统调用开销、碎片化和锁竞争等性能问题,内存池通过预分配、分块管理和缓存复用解决这些问题,下面就来了解一下... 目录一、C++内存分配的性能挑战二、内存池技术的核心原理三、主流内存池实现:TCMalloc与Jemalloc1. TCM