RDMA内核态函数ib_post_recv()源码分析

2024-02-26 01:52

本文主要是介绍RDMA内核态函数ib_post_recv()源码分析,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

接上文,上文分析了内核rdma向发送队列添加发送请求的函数ib_post_send,本文分析一下向接收队列添加接收请求的函数ib_post_recv。其实函数调用流程与上文类似,不再重复说明,可参考链接。
函数调用过程

最终会调用到这个函数
在这里插入图片描述
下面是这个函数的完整代码

int mlx5_ib_post_recv(struct ib_qp *ibqp, const struct ib_recv_wr *wr,const struct ib_recv_wr **bad_wr, bool drain)
{struct mlx5_ib_qp *qp = to_mqp(ibqp);struct mlx5_wqe_data_seg *scat;struct mlx5_rwqe_sig *sig;struct mlx5_ib_dev *dev = to_mdev(ibqp->device);struct mlx5_core_dev *mdev = dev->mdev;unsigned long flags;int err = 0;int nreq;int ind;int i;if (unlikely(mdev->state == MLX5_DEVICE_STATE_INTERNAL_ERROR &&!drain)) {*bad_wr = wr;return -EIO;}if (qp->type == IB_QPT_GSI)return mlx5_ib_gsi_post_recv(ibqp, wr, bad_wr);spin_lock_irqsave(&qp->rq.lock, flags);ind = qp->rq.head & (qp->rq.wqe_cnt - 1);for (nreq = 0; wr; nreq++, wr = wr->next) {if (mlx5_wq_overflow(&qp->rq, nreq, qp->ibqp.recv_cq)) {err = -ENOMEM;*bad_wr = wr;goto out;}if (unlikely(wr->num_sge > qp->rq.max_gs)) {err = -EINVAL;*bad_wr = wr;goto out;}scat = mlx5_frag_buf_get_wqe(&qp->rq.fbc, ind);if (qp->flags_en & MLX5_QP_FLAG_SIGNATURE)scat++;for (i = 0; i < wr->num_sge; i++)set_data_ptr_seg(scat + i, wr->sg_list + i);if (i < qp->rq.max_gs) {scat[i].byte_count = 0;scat[i].lkey       = cpu_to_be32(MLX5_INVALID_LKEY);scat[i].addr       = 0;}if (qp->flags_en & MLX5_QP_FLAG_SIGNATURE) {sig = (struct mlx5_rwqe_sig *)scat;set_sig_seg(sig, qp->rq.max_gs);}qp->rq.wrid[ind] = wr->wr_id;ind = (ind + 1) & (qp->rq.wqe_cnt - 1);}out:if (likely(nreq)) {qp->rq.head += nreq;/* Make sure that descriptors are written before* doorbell record.*/wmb();*qp->db.db = cpu_to_be32(qp->rq.head & 0xffff);}spin_unlock_irqrestore(&qp->rq.lock, flags);return err;
}

然后介绍一下这个函数:
1.参数。ibqp:指向一个IB队列对(Queue Pair)结构体的指针,表示待操作的队列对。
wr:指向接收请求工作请求(Work Request)链表的指针,即待投递的接收请求。
bad_wr:指向指针的指针,用于指示投递失败的工作请求。
drain:一个布尔值,指示是否需要在设备处于内部错误状态时尝试清空队列。

2.函数从ibqp中获取到对应的mlx5_ib_qp结构体,并获取其所属的设备和设备对象。如果设备处于内部错误状态且不需要排空队列,则函数将返回错误并将bad_wr指向当前的工作请求,否则继续执行。如果队列类型为GSI(General Services Interface),则调用特定的函数处理接收请求,并返回。然后,函数获取队列的锁,并初始化一些变量。

3.接着,遍历接收请求链表,依次处理每个接收请求:
检查队列是否溢出,如果溢出则返回错误。检查接收请求中的散射-聚集元素(Scatter-Gather Elements,SGE)数量是否超过队列的最大值,如果超过则返回错误。为接收请求获取一个WQE(Work Queue Element)缓冲区,并填充数据段。如果启用了数据完整性校验,则设置签名段。将接收请求的ID写入队列的WQE中。更新索引以指向下一个WQE。最后,如果成功处理了接收请求,则更新队列头,并确保在更新完成后再写入门铃寄存器,然后释放队列的锁。

这篇关于RDMA内核态函数ib_post_recv()源码分析的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/747371

相关文章

Python实现无痛修改第三方库源码的方法详解

《Python实现无痛修改第三方库源码的方法详解》很多时候,我们下载的第三方库是不会有需求不满足的情况,但也有极少的情况,第三方库没有兼顾到需求,本文将介绍几个修改源码的操作,大家可以根据需求进行选择... 目录需求不符合模拟示例 1. 修改源文件2. 继承修改3. 猴子补丁4. 追踪局部变量需求不符合很

Spring事务中@Transactional注解不生效的原因分析与解决

《Spring事务中@Transactional注解不生效的原因分析与解决》在Spring框架中,@Transactional注解是管理数据库事务的核心方式,本文将深入分析事务自调用的底层原理,解释为... 目录1. 引言2. 事务自调用问题重现2.1 示例代码2.2 问题现象3. 为什么事务自调用会失效3

新特性抢先看! Ubuntu 25.04 Beta 发布:Linux 6.14 内核

《新特性抢先看!Ubuntu25.04Beta发布:Linux6.14内核》Canonical公司近日发布了Ubuntu25.04Beta版,这一版本被赋予了一个活泼的代号——“Plu... Canonical 昨日(3 月 27 日)放出了 Beta 版 Ubuntu 25.04 系统镜像,代号“Pluc

找不到Anaconda prompt终端的原因分析及解决方案

《找不到Anacondaprompt终端的原因分析及解决方案》因为anaconda还没有初始化,在安装anaconda的过程中,有一行是否要添加anaconda到菜单目录中,由于没有勾选,导致没有菜... 目录问题原因问http://www.chinasem.cn题解决安装了 Anaconda 却找不到 An

Spring定时任务只执行一次的原因分析与解决方案

《Spring定时任务只执行一次的原因分析与解决方案》在使用Spring的@Scheduled定时任务时,你是否遇到过任务只执行一次,后续不再触发的情况?这种情况可能由多种原因导致,如未启用调度、线程... 目录1. 问题背景2. Spring定时任务的基本用法3. 为什么定时任务只执行一次?3.1 未启用

C++ 各种map特点对比分析

《C++各种map特点对比分析》文章比较了C++中不同类型的map(如std::map,std::unordered_map,std::multimap,std::unordered_multima... 目录特点比较C++ 示例代码 ​​​​​​代码解释特点比较1. std::map底层实现:基于红黑

Spring、Spring Boot、Spring Cloud 的区别与联系分析

《Spring、SpringBoot、SpringCloud的区别与联系分析》Spring、SpringBoot和SpringCloud是Java开发中常用的框架,分别针对企业级应用开发、快速开... 目录1. Spring 框架2. Spring Boot3. Spring Cloud总结1. Sprin

Spring 中 BeanFactoryPostProcessor 的作用和示例源码分析

《Spring中BeanFactoryPostProcessor的作用和示例源码分析》Spring的BeanFactoryPostProcessor是容器初始化的扩展接口,允许在Bean实例化前... 目录一、概览1. 核心定位2. 核心功能详解3. 关键特性二、Spring 内置的 BeanFactory

MyBatis-Plus中Service接口的lambdaUpdate用法及实例分析

《MyBatis-Plus中Service接口的lambdaUpdate用法及实例分析》本文将详细讲解MyBatis-Plus中的lambdaUpdate用法,并提供丰富的案例来帮助读者更好地理解和应... 目录深入探索MyBATis-Plus中Service接口的lambdaUpdate用法及示例案例背景

MyBatis-Plus中静态工具Db的多种用法及实例分析

《MyBatis-Plus中静态工具Db的多种用法及实例分析》本文将详细讲解MyBatis-Plus中静态工具Db的各种用法,并结合具体案例进行演示和说明,具有很好的参考价值,希望对大家有所帮助,如有... 目录MyBATis-Plus中静态工具Db的多种用法及实例案例背景使用静态工具Db进行数据库操作插入