Linux Buddy系统算法源码解析

2024-04-20 20:38

本文主要是介绍Linux Buddy系统算法源码解析,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Linux引导起来之后,伙伴系统分配算法是和物理内存最底层的接口。所有内存分配函数,比如vmalloc/kmalloc最后都是通过伙伴算法对内存进行分配的。接下来我们将解读一下伙伴系统的分配和回收算法。

伙伴系统模块提供了两个主要的接口给上层程序,他们是:

1.         页面请求函数

struct page * fastcall __alloc_pages(gfp_t gfp_mask, unsigned int order, struct zonelist *zonelist)

2.         页面释放函数

fastcall void __free_pages(struct page *page, unsigned int order)

【注】:在这里我对fastcall进行说明一下,他指明了函数参数传递的方式,前8个字节通过寄存器传入,后面多出来的通过栈传入,入栈顺序是从右到左。

 

下面分别对两个函数进行源码级的分析。

1.         页面分配

a)         如果请求的内存大小正好是一个页面,则需要从该CPU的冷热页面队列中进行分配。

       if (likely(order == 0)) {

              struct per_cpu_pages *pcp;

              pcp = &zone_pcp(zone, cpu)->pcp[cold]; // 获取冷热页面队列的指针。

              local_irq_save(flags);

              if (!pcp->count) { // 如果发现页面队列中的页面数为0,需要从伙伴系统中申请一组页面,填充页面队列。

                     pcp->count += rmqueue_bulk(zone, 0,

                                          pcp->batch, &pcp->list);

                     if (unlikely(!pcp->count))

                            goto failed;

              }

              // 从队列中取出一页分配出去

              page = list_entry(pcp->list.next, struct page, lru);

              list_del(&page->lru);

              // 计数器减一

              pcp->count--;

 

b)        如果申请的物理内存大于1个页面,直接从伙伴系统中申请

spin_lock_irqsave(&zone->lock, flags);

              page = __rmqueue(zone, order); // 访问伙伴系统

              spin_unlock(&zone->lock);

              if (!page)

                     goto failed;

 

c)        对刚才分配的页面进行一系列的检查。检查失败需要重新从伙伴系统进行分配。并且对该页面进行相应的初始化。

       if (prep_new_page(page, order))

              goto again;

d)        是否需要对页面进行清零操作

       if (gfp_flags & __GFP_ZERO)

              prep_zero_page(page, order, gfp_flags);

e)         如果从伙伴系统中申请的页面不是一个页面,即order > 1,我们称之为一个compound页面。下面需要初始化compound页面。通过设置页面的标志位来表示他是一个compound页面。

set_bit(PG_compound, &(page)->flags)

f)         如果以上过程页面分配成功,则完成分配,如果不成功,继续下面的尝试。

g)        kswapd内核线程唤醒,换出一些页面。

       do {

              wakeup_kswapd(*z, order);

       } while (*(++z));

h)        从伙伴系统中,尝试再次分配页面。

       page = get_page_from_freelist(gfp_mask, order, zonelist, alloc_flags);

       if (page)

              goto got_pg;

i)          如果发现该任务是专用于分配内存的(PF_MEMALLOC)并且不处于中断处理函数中,则强制性的分配内存,也就是说不管有没有到每个内存区的地水位线,都给他分配,除非是真的没得分配了。

       if (((p->flags & PF_MEMALLOC) || unlikely(test_thread_flag(TIF_MEMDIE)))

                     && !in_interrupt()) {

              if (!(gfp_mask & __GFP_NOMEMALLOC)) {

nofail_alloc:

                     /* go through the zonelist yet again, ignoring mins */

                     page = get_page_from_freelist(gfp_mask, order,

                            zonelist, ALLOC_NO_WATERMARKS);

                     if (page)

                            goto got_pg;

                     if (gfp_mask & __GFP_NOFAIL) {

                            blk_congestion_wait(WRITE, HZ/50);

                            goto nofail_alloc;

                     }

              }

              goto nopage; // 表示没有页面可以分配了。

       }

j)          如果不是特殊任务,则系统尝试将各个区的内存进行一个rebalance的动作,就是回收些内存。

did_some_progress = try_to_free_pages(zonelist->zones, gfp_mask);

然后在尝试分配:

              page = get_page_from_freelist(gfp_mask, order,

                                          zonelist, alloc_flags);

              if (page)

                     goto got_pg;

       如果分配失败,就终止请求页面的进程。

              out_of_memory(zonelist, gfp_mask, order);

 

       我们接下来分析一下从伙伴系统申请页面的函数。

       static struct page *__rmqueue(struct zone *zone, unsigned int order)

       从空闲表中当前order进行查找,找到第一个有空闲块的order,叫做current_order,然后进行分配,有两种情况,第一种情况:刚好current_order就是请求的order,则不需要合并。第二种情况:current_order是大于请求的order的,这种情况,是需要进行页面块的拆分和合并的。调用expand函数。通过设置相邻页面的PG_buddy位来表示他们是伙伴。

       for (current_order = order; current_order < MAX_ORDER; ++current_order) {

              area = zone->free_area + current_order;

              if (list_empty(&area->free_list))

                     continue;

 

              page = list_entry(area->free_list.next, struct page, lru);

              list_del(&page->lru);

              rmv_page_order(page);

              area->nr_free--;

              zone->free_pages -= 1UL << order;

              expand(zone, page, order, current_order, area);

              return page;

       }

 

2.         页面释放

fastcall void __free_pages(struct page *page, unsigned int order)

a)         先测试该页面的引用计数器是不是为1,否则不能释放,因为其他进程可能引用了该页面。

       if (put_page_testzero(page))

b)        如果释放的页面为1,则释放到热页面队列中去。否则直接释放到伙伴系统中去。

              if (order == 0)

                     free_hot_page(page);

              else

                     __free_pages_ok(page, order);

接下来我们分析一下释放一个页面到伙伴系统的代码:

static inline void __free_one_page(struct page *page, struct zone *zone, unsigned int order)

1.         如果是compound页面,先清除页面标志位PG_compound

       if (unlikely(PageCompound(page)))

              destroy_compound_page(page, order);

2.         查找伙伴块,并对伙伴块进行合并,最后将合并后的块插入到新的order中去。这个过程一直持续下去,直到伙伴块合并完为止。

       while (order < MAX_ORDER-1) {

              unsigned long combined_idx;

              struct free_area *area;

              struct page *buddy;

 

              buddy = __page_find_buddy(page, page_idx, order);

              if (!page_is_buddy(buddy, order))

                     break;            /* Move the buddy up one level. */

 

              list_del(&buddy->lru);

              area = zone->free_area + order;

              area->nr_free--;

              rmv_page_order(buddy);

              combined_idx = __find_combined_index(page_idx, order);

              page = page + (combined_idx - page_idx);

              page_idx = combined_idx;

              order++;

       }

 

这篇关于Linux Buddy系统算法源码解析的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/921270

相关文章

网页解析 lxml 库--实战

lxml库使用流程 lxml 是 Python 的第三方解析库,完全使用 Python 语言编写,它对 XPath表达式提供了良好的支 持,因此能够了高效地解析 HTML/XML 文档。本节讲解如何通过 lxml 库解析 HTML 文档。 pip install lxml lxm| 库提供了一个 etree 模块,该模块专门用来解析 HTML/XML 文档,下面来介绍一下 lxml 库

不懂推荐算法也能设计推荐系统

本文以商业化应用推荐为例,告诉我们不懂推荐算法的产品,也能从产品侧出发, 设计出一款不错的推荐系统。 相信很多新手产品,看到算法二字,多是懵圈的。 什么排序算法、最短路径等都是相对传统的算法(注:传统是指科班出身的产品都会接触过)。但对于推荐算法,多数产品对着网上搜到的资源,都会无从下手。特别当某些推荐算法 和 “AI”扯上关系后,更是加大了理解的难度。 但,不了解推荐算法,就无法做推荐系

基于人工智能的图像分类系统

目录 引言项目背景环境准备 硬件要求软件安装与配置系统设计 系统架构关键技术代码示例 数据预处理模型训练模型预测应用场景结论 1. 引言 图像分类是计算机视觉中的一个重要任务,目标是自动识别图像中的对象类别。通过卷积神经网络(CNN)等深度学习技术,我们可以构建高效的图像分类系统,广泛应用于自动驾驶、医疗影像诊断、监控分析等领域。本文将介绍如何构建一个基于人工智能的图像分类系统,包括环境

水位雨量在线监测系统概述及应用介绍

在当今社会,随着科技的飞速发展,各种智能监测系统已成为保障公共安全、促进资源管理和环境保护的重要工具。其中,水位雨量在线监测系统作为自然灾害预警、水资源管理及水利工程运行的关键技术,其重要性不言而喻。 一、水位雨量在线监测系统的基本原理 水位雨量在线监测系统主要由数据采集单元、数据传输网络、数据处理中心及用户终端四大部分构成,形成了一个完整的闭环系统。 数据采集单元:这是系统的“眼睛”,

linux-基础知识3

打包和压缩 zip 安装zip软件包 yum -y install zip unzip 压缩打包命令: zip -q -r -d -u 压缩包文件名 目录和文件名列表 -q:不显示命令执行过程-r:递归处理,打包各级子目录和文件-u:把文件增加/替换到压缩包中-d:从压缩包中删除指定的文件 解压:unzip 压缩包名 打包文件 把压缩包从服务器下载到本地 把压缩包上传到服务器(zip

康拓展开(hash算法中会用到)

康拓展开是一个全排列到一个自然数的双射(也就是某个全排列与某个自然数一一对应) 公式: X=a[n]*(n-1)!+a[n-1]*(n-2)!+...+a[i]*(i-1)!+...+a[1]*0! 其中,a[i]为整数,并且0<=a[i]<i,1<=i<=n。(a[i]在不同应用中的含义不同); 典型应用: 计算当前排列在所有由小到大全排列中的顺序,也就是说求当前排列是第

csu 1446 Problem J Modified LCS (扩展欧几里得算法的简单应用)

这是一道扩展欧几里得算法的简单应用题,这题是在湖南多校训练赛中队友ac的一道题,在比赛之后请教了队友,然后自己把它a掉 这也是自己独自做扩展欧几里得算法的题目 题意:把题意转变下就变成了:求d1*x - d2*y = f2 - f1的解,很明显用exgcd来解 下面介绍一下exgcd的一些知识点:求ax + by = c的解 一、首先求ax + by = gcd(a,b)的解 这个

综合安防管理平台LntonAIServer视频监控汇聚抖动检测算法优势

LntonAIServer视频质量诊断功能中的抖动检测是一个专门针对视频稳定性进行分析的功能。抖动通常是指视频帧之间的不必要运动,这种运动可能是由于摄像机的移动、传输中的错误或编解码问题导致的。抖动检测对于确保视频内容的平滑性和观看体验至关重要。 优势 1. 提高图像质量 - 清晰度提升:减少抖动,提高图像的清晰度和细节表现力,使得监控画面更加真实可信。 - 细节增强:在低光条件下,抖

嵌入式QT开发:构建高效智能的嵌入式系统

摘要: 本文深入探讨了嵌入式 QT 相关的各个方面。从 QT 框架的基础架构和核心概念出发,详细阐述了其在嵌入式环境中的优势与特点。文中分析了嵌入式 QT 的开发环境搭建过程,包括交叉编译工具链的配置等关键步骤。进一步探讨了嵌入式 QT 的界面设计与开发,涵盖了从基本控件的使用到复杂界面布局的构建。同时也深入研究了信号与槽机制在嵌入式系统中的应用,以及嵌入式 QT 与硬件设备的交互,包括输入输出设