DPDK VPP简单入门及源码plugin实例分析

2023-10-12 17:20

本文主要是介绍DPDK VPP简单入门及源码plugin实例分析,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

一、VPP技术

大多通用操作系统的网络协议栈一直都在内核中实现。其实网络协议栈只是一个应用,而不是操作系统的范畴,没有人规定网络协议栈一定是要早内核实现的。这些操作系统的开发者们将一切和具体业务无关的东西都塞进了操作系统内核。于是出现了pfring/netmap/dpdk等机制,做法是by pass掉内核协议栈,虽然方便,但是性能很差。

所以,通用操作系统参考通信行业将数据面、控制面、管理面分离的做法,把网络协议栈(数据平面)从操作系统剥离出来了,让操作系统去做控制的事情。

当网络协议栈,从内核态转移到用户态之后。很多之前利用内核协议栈做的功能,比如交换、路由、防火墙、NAT等功能,自然也能转到用户态去做。

但是,DPDK框架本身提供的能力还是比较有限的,要使用DPDK实现防火墙等功能,必须重新实现TCP/IP协议栈,确实不是一件容易的事情。

1. FD.io

FD.io (Fast data – Input/Output) 是许多项目和库的一个集合,基于DPDK并逐渐演化,支持在通用硬件平台上部署灵活和可变的业务。FD.io支持多个平台上(x86、ARM和PowerPC)和部署在不同的环境中(裸机、虚拟机和容器)。

FD.io的一个关键项目是VPP(Vector Packet Processing:矢量报文处理)。VPP是高度模块化的项目,新开发的功能模块很容易被集成进VPP,而不影响VPP底层的代码框架。

2. VPP

VPP(Vector Packet Processing,矢量数据包处理)其实就是一个用户态协议栈,也就是一个通用的数据平面。VPP主要有两个功能:框架可扩展;成熟的交换/路由功能

VPP运行于用户空间,支持多种收包方式,常用的是DPDK。通俗来说,*DPDK是lib,VPP是应用*;或者,*VPP用DPDK收包,DPDK是VPP的一个插件*

在这里插入图片描述

二、VPP软件架构

1. 基础架构

VPP软件框架包含基础设施层VPP INFRA、矢量处理库VLIB、网络层VNET、插件集Plugins。(越往核心越底层

在这里插入图片描述
VPP Infra:提供一些基本的通用的功能函数库:包括内存管理、向量操作、hash、timer等;

VLIB:主要提供基本的应用管理库:buffer管理、graph node管理、线程、CLI、trace等;

VNET:提供网络资源能力:比如设备、L2-4功能、session管理、控制管理、流量管理等;

Plugins:主要为实现一些功能,在程序启动的时候加载,一般情况下会在插件中加入一些node节点去实现相关功能。

2. 源码结构

目录名称描述说明
build-data构建元数据
build-root构建输出目录
doxygen文档生成器配置
dpdkDPDK补丁与构建基础设施
src\examplesVPP示例代码
src\pluginsVPP的捆绑插件目录
src\svm共享虚拟内存分配库(shared virtual memory)
src\vlibVPP的应用程序库
src\vlibmemoryVPP内存管理
src\vlibsocketVPP Socket I/O
src\vlib-apiVPP API库
src\vnetVPP网络
src\vppVPP应用程序
src\vpp-apiVPP应用程序API绑定
src\vppinfraVPP核心库
src\tests独立测试(不属于测试套件)
test单元测试和Python测试工具

3. VPP图节点调度

在这里插入图片描述
(1) VPP中的图节点分为四种类型(四种IO机制)

VLIB_NODE_TYPE_INTERNAL:被调用图的内部节点,负责处理数据包。

VLIB_NODE_TYPE_INPUT:收包逻辑节点,每次main loop循环迭代之前都会被调用。

VLIB_NODE_TYPE_PRE_INPUT:调用输入节点之前的图节点,用作例如在处理输入数据包前清空网卡。

VLIB_NODE_TYPE_PROCESS:节点可挂起也可恢复,类似实现了单个线程中的多任务调度机制。

(2) 主要结构体

vlib_node_main_t:图节点柱结构,记录图节点的全局信息。

vlib_node_t:记录图节点的相关静态信息。

vlib_node_runtime_t:图节点调度实际使用的结构体,由vlib_node_t结构体中的信息和私有信息组成。

vlib_frame_t:保存图节点要处理的数据的内存地址信息。

vlib_pending_frame_t:记录运行节点的索引、数据包索引和下一个数据包的索引。

vlib_next_frame_t:记录图节点要处理的下一条的数据。

(3) 图节点调度流程

​ vlib_main_loop函数负责调度图节点。vpp的函数调用更像是一种各个节点之间相互连接,通过决定下一跳节点的路径在确定整个代码的执行路径。同样这种方式的函数调用提供了很低的耦合性,所以基于这种方式的二次开发不用太多考虑各个模块之间的相互影响,自定义的节点根据格式给出相应的回调函数来插入自定义的功能。

三、VPP配置文件

/etc/vpp/startup.cfg:
在这里插入图片描述

四、VPP插件框架

VPP插件的流程“三步走”:

init_plugin ------->> example.c把node加入到链当中
set command ------->> example_node.c
function -------->> example_node.c

1. 插件模板目录结构

此次学习使用的是vpp18.01.2版本,仍然使用makefile形式编译,并未更新至VPP19版本以上使用cmake。
在这里插入图片描述

2. 源码分析

生成模板插件中的部分文件引用了VPP库中几个关键性目录中文件。整个VPP的软件框架主要分为四个层面,依次执行顺序是:VPP Infra -> VLIB -> VNET -> Plugins,所以程序编码中,会以VLIB宏为基础执行,再是VNET相关的宏。

(1) 注册节点:VLIB_REGISTER_NODE

在pktdump_node.c的VLIB_REGISTER_NODE中注册了内部节点ck_sample。

在这里插入图片描述

(2) 节点功能实现函数:VLIB_NODE_FN

在pktdump_node.c,接收数据包并打印输出。
在这里插入图片描述

(3) 注册插件名称以及描述:VLIB_PLUGIN_REGISTER

在pktdump.c的VLIB_PLUGIN_REGISTER中,描述了插件的VPP版本号以及描述等信息。
在这里插入图片描述

(4) 注册节点初始化1:VLIB_INIT_FUNCTION

在pktdump.c的VLIB_INIT_FUNCTION函数中,实例化ck_sample_main_t结构体,赋值各个参数。
在这里插入图片描述

(5) 注册节点初始化2:VNET_FEATURE_INIT

因为VLIB与VNET是层级调用关系,所以在pktdump.c的VNET_FEATURE_INIT初始化,让其在ethernet-input节点运行之前运行。这一步中,将VLIB中定义的功能函数通过.node_name以及.arc_name联系起来。
在这里插入图片描述

(6) 注册节点的CLI命令及激活:VLIB_CLI_COMMAND

通过命令行来触发VLIB_CLI_COMMAND (ck_sample_command, static)事件。
在这里插入图片描述

(7) 流程图归纳

在这里插入图片描述

五、VPP流程概览

在这里插入图片描述

六、VPP数据结构概览

在这里插入图片描述

参考链接:

推荐一个零声学院dpdk免费公开课,个人觉得老师讲得不错,分享给大家:

https://course.0voice.com/v1/course/intro?courseId=4&agentId=0

这篇关于DPDK VPP简单入门及源码plugin实例分析的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/197298

相关文章

从入门到精通MySQL联合查询

《从入门到精通MySQL联合查询》:本文主要介绍从入门到精通MySQL联合查询,本文通过实例代码给大家介绍的非常详细,需要的朋友可以参考下... 目录摘要1. 多表联合查询时mysql内部原理2. 内连接3. 外连接4. 自连接5. 子查询6. 合并查询7. 插入查询结果摘要前面我们学习了数据库设计时要满

怎样通过分析GC日志来定位Java进程的内存问题

《怎样通过分析GC日志来定位Java进程的内存问题》:本文主要介绍怎样通过分析GC日志来定位Java进程的内存问题,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录一、GC 日志基础配置1. 启用详细 GC 日志2. 不同收集器的日志格式二、关键指标与分析维度1.

从入门到精通C++11 <chrono> 库特性

《从入门到精通C++11<chrono>库特性》chrono库是C++11中一个非常强大和实用的库,它为时间处理提供了丰富的功能和类型安全的接口,通过本文的介绍,我们了解了chrono库的基本概念... 目录一、引言1.1 为什么需要<chrono>库1.2<chrono>库的基本概念二、时间段(Durat

MySQL中的表连接原理分析

《MySQL中的表连接原理分析》:本文主要介绍MySQL中的表连接原理分析,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录1、背景2、环境3、表连接原理【1】驱动表和被驱动表【2】内连接【3】外连接【4编程】嵌套循环连接【5】join buffer4、总结1、背景

java向微信服务号发送消息的完整步骤实例

《java向微信服务号发送消息的完整步骤实例》:本文主要介绍java向微信服务号发送消息的相关资料,包括申请测试号获取appID/appsecret、关注公众号获取openID、配置消息模板及代码... 目录步骤1. 申请测试系统2. 公众号账号信息3. 关注测试号二维码4. 消息模板接口5. Java测试

解析C++11 static_assert及与Boost库的关联从入门到精通

《解析C++11static_assert及与Boost库的关联从入门到精通》static_assert是C++中强大的编译时验证工具,它能够在编译阶段拦截不符合预期的类型或值,增强代码的健壮性,通... 目录一、背景知识:传统断言方法的局限性1.1 assert宏1.2 #error指令1.3 第三方解决

MySQL数据库的内嵌函数和联合查询实例代码

《MySQL数据库的内嵌函数和联合查询实例代码》联合查询是一种将多个查询结果组合在一起的方法,通常使用UNION、UNIONALL、INTERSECT和EXCEPT关键字,下面:本文主要介绍MyS... 目录一.数据库的内嵌函数1.1聚合函数COUNT([DISTINCT] expr)SUM([DISTIN

python中Hash使用场景分析

《python中Hash使用场景分析》Python的hash()函数用于获取对象哈希值,常用于字典和集合,不可变类型可哈希,可变类型不可,常见算法包括除法、乘法、平方取中和随机数哈希,各有优缺点,需根... 目录python中的 Hash除法哈希算法乘法哈希算法平方取中法随机数哈希算法小结在Python中,

Java Stream的distinct去重原理分析

《JavaStream的distinct去重原理分析》Javastream中的distinct方法用于去除流中的重复元素,它返回一个包含过滤后唯一元素的新流,该方法会根据元素的hashcode和eq... 目录一、distinct 的基础用法与核心特性二、distinct 的底层实现原理1. 顺序流中的去重

从入门到精通MySQL 数据库索引(实战案例)

《从入门到精通MySQL数据库索引(实战案例)》索引是数据库的目录,提升查询速度,主要类型包括BTree、Hash、全文、空间索引,需根据场景选择,建议用于高频查询、关联字段、排序等,避免重复率高或... 目录一、索引是什么?能干嘛?核心作用:二、索引的 4 种主要类型(附通俗例子)1. BTree 索引(