DPDK到底是什么

数据平面开发套件(DPDK ,Data Plane Development Kit)是由6WIND,Intel等多家公司开发,主要基于Linux系统运行,用于快速数据包处理的函数库与驱动集合,可以极大提高数据处理性能和吞吐量,提高数据平面应用程序的工作效率。

DPDK到底是什么

一、DPDK到底是什么

数据平面开发套件(DPDK ,Data Plane Development Kit)是由6WIND,Intel等多家公司开发,主要基于Linux系统运行,用于快速数据包处理的函数库与驱动集合,可以极大提高数据处理性能和吞吐量,提高数据平面应用程序的工作效率。

DPDK是一个linux基金会的开源项目。开发DPDK的主要目的,是在数据平面应用中为快速的数据包处理提供一个简单而完善的架构。在理解此工具集之后,开发人员可以以此为基础进行新的原型设计,或简单地为我所用。

DPDK架构通过创建EAL(Environment Abstraction Layer,环境抽象层)来为不同的工作环境创造函数库集,创建后开发者即可把自己的应用与函数库进行链接。该架构也包含跟踪调试,PCIe总线接入等功能,并有相关样例帮助开发者学习如何使用这些功能。

二、关键技术

环境抽象层

DPDK的创造的环境抽象层(EAL, Environment Abstraction Layer)主要负责对计算机底层资源(如硬件和内存空间)的访问,并对提供给用户的接口实施了实现细节的封装。其初始化例程决定了如何分配这些资源(PCI设备、计时器、控制台等)。

EAL提供的典型服务包括:

  • 加载和启动DPDK:DPDK及其应用程序会被链接为单一应用,因此需要通过某种方式进行加载DPDK。
  • 核关联/分配过程:EAL提供了将执行单元分配给特定核并创建执行实例的机制。
  • 预留系统内存:EAL为预留不同的内存区域提供便利,例如用于设备交互的物理内存区域。
  • 抽象PCI地址:EAL提供了访问PCI地址空间的接口。
  • 跟踪和调试功能:日志、堆栈转储等。
  • 实用的功能:libc中所没有提供的自旋锁和原子计数器。
  • CPU功能识别:在运行时确定CPU是否支持特定功能,确定当前CPU是否支持编译产生的二进制指令集。
  • 中断处理:向特定中断源注册/注销回调的接口。
  • 时钟功能:用于设置/删除在特定时间运行的回调函数接口。

轮询模式驱动

DPDK包括1Gb,10Gb,40Gb和半虚拟化抽象层的轮询模式驱动(PMD, Poll Mode Driver)。PMD由用户空间的特定的驱动程序提供的API组成,用于对设备和它们相应的队列进行设置。抛弃了基于中断的异步信号发送机制为该架构带来很大的开销节省。避免中断性能瓶颈是DPDK提升数据包处理速度的关键之一。

DPDK环境为数据包处理应用考虑了两种模型:运行至完成(run-to-completion)模型和管道(pipeline)模型。在运行至完成模型中,一个API向某个特定端口的接收描述符环轮询以接收数据包。接着这个数据包在同一个核上被处理,之后被一个发送用API放到端口的传输描述符环上;在管道模型中,一个核心会通过API对一个或多个端口的接收描述符环进行轮询,数据包通过环被接收和传递给另一个核心,然后在这个核心上被处理,之后可能被发送用API放到端口的传输描述符环上。

运行至完成是一个同步模型,每个指派给DPDK的逻辑核心执行如下所示的循环:

  1. 通过PMD接收用API来提取输出数据包
  2. 根据转发,一一处理收到的数据包
  3. 通过PMD发送用API发送输出数据包

相反,管道模型是一个异步模型,有的逻辑核心只执行数据包提取,而有的只执行处理,收到的数据包在这些逻辑核心之间通过环来传递。提取核心执行如下的循环:

  1. 通过PMD接收用API来提取输出数据包
  2. 通过队列提供数据包给处理核心

处理核心执行如下的循环:

  1. 从队列中提取数据包
  2. 根据重传(如果被转发)处理数据包

为了避免不必要的中断性能瓶颈,执行环境禁止任何异步通知机制的使用。在任何需要或合适的时候,异步通信都应尽可能采用环的方式。

在多核环境中避免锁竞争是一个重要的问题。为了处理这个问题,PMD被设计为可以尽可能地在单核私有资源下工作。例如,PMD为每个核心每个端口提供一个单独的队列。同样的,每个端口的接收队列只会被指派给少数一个逻辑核心并接收它的轮询。

延伸阅读

函数库

Malloc Library

提供分配任意大小内存的API。

Ring Library

提供对一种特殊的链表队列的管理,具有先进先出、定长、无锁、并发入/出队等特性。

优点:工作更快,实现简单,适用于块数据的入/出队;

一个简单的环结构

缺点:定长、环多导致内存占用增加。

Mempool Library

内存池用于分配固定大小的对象。在DPDK中内存池用名字区分,并用环来存储未使用的对象。

Mbuf Library

用于分配和释放缓冲区给DPDK应用来存储缓存信息,使用上述的内存池来存储。

一个单段缓冲区

IVSHMEM Library

为在虚拟机与主机或虚拟机间的零拷贝数据共享提供便利,得名于使用了QEMU的IVSHMEM机制。

Link Bonding Poll Mode Driver Library

纯软件函数库,允许多个PMD组合为单个逻辑PMD,类似于在linux中将多个网络接口组合为一个逻辑接口。

组合PMD

Timer Library

为DPDK执行单元提供时间服务以实现反馈函数的异步执行。时钟有单次工作的也有周期工作的,可载入一个核心上的时钟后在另一个上执行。时钟提供很高的精度,也可以在编译时禁用以提高性能。

Hash Library

创建散列表以提供快速查找功能。

LPM Library

为32位关键码实现的最长前缀匹配表查找方法。用于在IP转发应用中找到最合适的路由匹配。

LPM6 Library

即LPM for IPv6,为128位关键码实现的最长前缀匹配表查找方法,用于在IPv6转发应用中找到最合适的路由匹配。

文章标题:DPDK到底是什么,发布者:E.Z,转载请注明出处:https://worktile.com/kb/p/62035

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
E.ZE.Z认证作者
上一篇 2023年7月27日 下午9:27
下一篇 2023年7月27日

相关推荐

  • 在线项目管理的网站哪个最好

    摘要:在线项目管理网站市场中最佳选择通常归结为Asana,它以其1、灵活性;2、用户友好性;3、强大的整合功能而闻名。Asana提供了一系列功能来支持项目规划、跟踪和沟通,包括按照截止日期和优先级组织任务、自定义工作流、以视图形式呈现数据、实时通讯和第三方软件集成。这些特性使Asana成为个人和团队…

    2023年11月13日
    24000
  • 如何进行本地企业SEO

    进行本地企业SEO的关键步骤:1、关键词研究和优化;2、优化Google我的企业;3、本地链接建设;4、优化网站内容;5、移动友好性。本地企业SEO是一种针对本地市场的搜索引擎优化策略,旨在帮助本地企业提高在线可见性、吸引更多本地潜在客户,并提升其在搜索引擎结果页面中的排名。

    2023年11月11日
    32300
  • 速达用什么编程

    速达使用了多种编程语言和技术堆栈,根据不同模块和产品需求,可能采用了1、JavaScript、2、Python、3、Java等语言进行开发。其中,JavaScript常被用来开发速达软件的前端用户界面,它使得应用程序具有交互性和动态特性。JavaScript也可以用于后端开发,特别是当使用Node.…

    2024年5月2日
    600
  • 编程什么语言难

    编程语言的难度因人而异,但普遍认为1、汇编语言、2、C++、3、JavaScript是较难的三种语言。特别是汇编语言,它直接与计算机硬件交互,需要程序员理解底层硬件逻辑,编写过程中对硬件的控制和资源管理要求极高。这直接导致了汇编语言的学习和应用门槛较高,对初学者尤其是没有深厚硬件知识背景的人来说,学…

    2024年5月2日
    800
  • 什么是悲观锁和乐观锁

    乐观锁,顾名思义就是总是假设较好的情况,每次获取数据的时候都认为别人不会修改,所以不会上 锁,但是在更新的时候会判断一下在此期间别人有没有去更新这个数据。悲观锁,顾名思义就是总是假设最坏的情况,每次获取数据的时候都认为别人会修改,所以每次在获取数据的时候都会上锁。 一、什么是乐观锁 乐观锁,顾名思义…

    2023年7月27日
    40300
  • 编程的真正用处是什么

    编程的真正用处涵盖了解决问题、提高效率、创新技术和改变世界四个核心领域。深入探讨提高效率,编程让复杂和耗时的任务自动化成为可能,通过编写算法,软件可以执行数据分析、管理工作流程及执行预定任务,有效减少人力资源的需求,同时提升任务的完成速度和质量。 一、RESOLVING COMPLEX PROBLE…

    2024年4月26日
    3000
  • 成人学编程学什么

    成人学习编程首先应该关注以下三点:1、选择对应职业路径的编程语言,2、系统学习计算机基础知识,以及3、实践和项目经验的累积。其中,选择合适的编程语言是决定学习效率和未来职业道路的重要因素。例如,如果目标是成为一名网页前端开发者,那么应该学习HTML, CSS 和JavaScript。不同的目标职业路…

    2024年5月2日
    600
  • 编程分别做什么

    编程在当今社会扮演着极其关键的角色,它的主要职责包括1、实现软件开发、2、数据处理与分析、3、自动化任务执行。实现软件开发是编程最传统也是最基础的职责,涉及从简单的个人应用到复杂的企业级应用系统的设计与实现,其包含前端展示逻辑、后端服务器逻辑以及数据库管理等多个方面。 一、实现软件开发 编程最直观的…

    2024年5月2日
    600
  • 算法对C编程的意义是什么

    算法是编程的心脏,它们是解决问题和执行任务的详细步骤。在C编程中,算法的意义体现在程序的性能优化、资源管理和代码可维护性中。例如,选择排序和快速排序都可以解决排序问题,但快速排序在大多数情况下因其更快的平均时间复杂度而更受推崇。在对大数据集进行排序时,这种优化带来的性能提升是显著的。合理设计的算法可…

    2024年4月27日
    3500
  • 什么样的编程语言有用

    编程语言的有效性取决于几个关键因素,如1、生态系统的成熟度、2、社区和支持、3、语言的通用性和适应性、4、学习曲线的平缓度、5、应用场景的广泛性。其中,社区和支持的重要性不容忽视。一个活跃的社区可以提供丰富的学习资源、第三方库和框架,以及问题解决方案。社区的热情和活力也是保障编程语言长期发展与维护的…

    2024年4月27日
    2900

发表回复

登录后才能评论
注册PingCode 在线客服
站长微信
站长微信
电话联系

400-800-1024

工作日9:30-21:00在线

分享本页
返回顶部