【冲破内核瓶颈,让I/O性能飙升】DPDK工程师手册

✨✨✨【DPDK工程师手册】 —— 官方文档,最新视频,开源项目,论文,大厂内部ppt,知名工程师一览表

image

—— 冲破内核瓶颈,让I/O性能飙升。

书籍电子版资料 官方文档 最新视频 大会ppt 开源项目 论文 知名工程师
📕 📜 📀 🎞 🏗 📰 👷
<dr>

图片说明

📣 【梳理思维,一图定乾坤】DPDK架构图.pdf

🔥 【800页编程指南,含中文】DPDK编程指南.pdf

🔈 【今日推荐阅读】打破DPDK的误区: 数据面最流行的工具包DPDK的前世,现在和未来

💪 国人技术,弘扬大厂实力

中兴通讯高性能5G核心网UPF实现

中国电信DPDK技术白皮书v1.0

爱奇艺DPDK网络优化实践

基于DPDK实现的LB支撑阿里巴巴双11业务

📕 书籍电子版资料

《DPDK应用基础》

《深入浅出DPDK》

《Linux开源网络全栈详解:从DPDK到OpenFlow》

《DPDK Programmer’s Guide》

《Data Plane Development Kit (DPDK)》

📜 官方文档

《DPDK Testpmd 应用》.pdf

《DPDK for FreeBSD入门》.pdf

《DPDK for Linux入门》.pdf

《DPDK 中的 NIC 驱动程序》.pdf

《DPDK 示例应用》.pdf

《Fastpass:集中的“零队列”数据中心网络(英文)》.pdf

《发布说明:数据平面开发套件》.pdf

《含 XEN 的 DPDK》.pdf

《在英特尔® 处理器上启用卓越的 Galois-Counter 模式》.pdf

《多 Gbps 的流管理:经验教训(英文)》.pdf

《程序员指南:数据平面开发套件》.pdf

《采用 CUCKOOSWITCH 的可扩展、高性能以太网转发(英文)》.pdf

📀 最新视频


2021年DPDK北美峰会 演讲者
Welcome_ DPDK Summit NA 2021Virtual Experience Arpit Joshipura
DPDK on RISC-V Stanislaw Kardach, Semihalf
Getting Past Incubation_ DPDK for Windows Platform Goes Mainstream
Using Virtual Functions with DPDK in OpenShift 4 Ip Sam & Wuxin Zeng, Red Hat
High Density Scalable Cloud Gateway for Cloud Networking Hongjun Ni & Pan Zhang, Intel
Running P4 programs as DPDK applications Cristian Dumitrescu & Han Wang - Intel
Advanced API For Rules Management - RTE Flow Next Evolution Ori Kam, NVIDIA
Tools for Memory Model Simulation Herd7 - Honnappa Nagarahalli, ARM
Transitioning Flow Based ethdev Ops to rte_flow Ajit Khaparde, Broadcom
Closing Remarks - DPDK Summit NA 2021 Arpit Joshipura

2021年亚太DPDK峰会 演讲者
Welcome- DPDK Summit APAC 2021 Jim St. Leger
Dynamic Mempool_ One of the Final Steps to Make DPDK Cloud-Native Jielong Zhou
An Ideal Network IO Virtualization Solution in DPDK Xiuchun Lu, Chenbo Xia
Handling Elephant Flow on a DPDK-Based Load Balancer Hongjun Ni, Yipeng Wang, Chenmin Sun
OvS Tunneling and Connection Tracking Hardware Offload via Rte_flow Xiao Wang, Rosen Xu
Accelerating vHost Data Plane with DMA in the CPU Jiayu Hu
Warp Speed Cryptographic Applications Fan Zhang
Introducing Hardware Content Inspection Accelerator Into the ... Kun Qiu, Harry Chang
Enhance SEBA-Based FTTH vCPE System with SPP vSwitch Tri Trinh, Kentaro Ogawa
Memory Error Detect Enhancement for DPDK Fuzzing Xueqin Lin, Yinan Wang
Using DPDK to Build PCIe Endpoint Framework Jun Yang, Hongjun Chen

2017年DPDK中国上海技术峰会 演讲者
A Better Virtio towords NFV Cloud Cunming Liang
Accelerate VM I_O via SPDK and Crypto for Generaic vHost Changpeng Liu,Xin Zeng
Accelerate VM I_O via SPDK and Crypto for Generaic vHost_2 Changpeng Liu,Xin Zeng
OVS-DPDK Practices in Meituan Cloud Huai Huang
A High speed DPDK PMD approach in LXC Jie Zheng
Cloud Data Center, Network Security practices Kai Wang
DPDK in container - Status Quo and Future Directions Jianfeng Tan
F-Stack, a full user space network service on DPDK Hailang Wang
Support Millions users in vBRAS Zhouhui Sun
Telco data plane status, challenges and solutions Hao Lin
Towards Low Latency Interrupt Mode PMD Yunhong Jiang,Wei Wang
Accelerate VPP workload with DPDK Cryptodev Framework Fan Zhang
Data Center Security Use Case with DPDK Haohao Zhang
Intel® 25GbE Ethernet Adapter Advanced Features for NFV, Adaptiv Helin Zhang,Jingjing Wu
Intel® 25GbE Ethernet Adapter Advanced Features for NFV, Adaptiv_2 Helin Zhang,Jingjing Wu
Network performance tuning, lesson learned Fangliang Lou
OPDL- On The Path To Packet Processing Nirvana Liang Ma

🎞 大会ppt

APAC 2021-Accelerating vHost with DMA-JiayuHu.pdf

APAC 2021-DPDK APAC Summit - Opening Remarks.pdf

APAC 2021-DPDK_Summit21_wdate_PPT_OvS-Tunnel_CT.pdf

APAC 2021-Handling Elephant Flow on a DPDK-Based Load Balancer.pdf

APAC 2021-Hardware Accelerator into the Network Security Applications.pdf

APAC 2021-Ideal_Virt_Framework.pdf

APAC 2021-Memory error detect enhancement for DPDK fuzzing_APAC_final-1.pdf

APAC 2021-SEBA_SPP_NTT_VNPT_DPDK_SUMMIT_APAC_2021_Official_v0.1.pdf

APAC 2021-Using DPDK to build PCIe endpoint framework.pdf

APAC 2021-dynamic mempool.pdf

APAC 2021-warp speed crypto - A new DPDK Cryptodev Raw Data Path API and its use in Fd.io VPP.pdf

NA 2021-Cristian_Dumitrescu_Han_Wang_Running_P4_Programs_as_DPDK_Apps.pdf

NA 2021-DPDK NA - Closing Remarks.pptx.pdf

NA 2021-DPDK Summit North America 2021.pdf

NA 2021-DPDK on RISC-V - Stanislaw Kardach, Semihalf.pdf

NA 2021-High Density Scalable Cloud Gateway for Cloud Networking_DPDK Summit NA 2021_Ni Hongjun & Zhang Pan.pdf

NA 2021-Memory Model Simulation Tool - Herd7.pdf

NA 2021-RTE_Flow improvements Ori Kam.pdf

NA 2021-Transitioning Flow Based ethdev Ops to rte_flow - Ajit Khaparde.pdf

NA 2021-Using Virtual Functions with DPDK in OpenShift 4.pdf

NA 2021-dpdk-na-summit-2021_dpdk-on-riscv_kardach.pdf

NA 2021-zero-copy-ring-APIs-DPDK.pdf

DPDK-China2017-Huang-OVS-DPDK-Practices-in-Meituan-Cloud.pdf

DPDK-China2017-JiangWang-Low-Latency-PMD.pdf

DPDK-China2017-LiangWang-A-Better-Virtio-towards-NFV-Cloud.pdf

DPDK-China2017-Lin-Telco-Data-Plane-Status.pdf

DPDK-China2017-LiuZeng-Accelerate-VM-IO-via-SPDK.pdf

DPDK-China2017-Lou-Network-Performance-Tuning.pdf

DPDK-China2017-Ma-OPDL.pdf

DPDK-China2017-Sun-Support-Millions-vBRAS.pdf

DPDK-China2017-Tan-DPDK-in-Container.pdf

DPDK-China2017-Wang-Cloud-Data-Center-Security Technologies.pdf

DPDK-China2017-Wang-Cloud-Data-Center.pdf

DPDK-China2017-Wang-FStack.pdf

DPDK-China2017-Zhang-Accelerate-VPP.pdf

DPDK-China2017-Zhang-Data-Center-Security-Use-Case-with-DPDK.pdf

DPDK-China2017-ZhangWu-Intel-25GbE-Ethernet.pdf

DPDK-China2017-Zheng-High-Speed-DPDK-PMD-LXC.pdf

🏗 开源项目


项目 简介
dpdk-burst-replay 注入pcap文件
DTS DPDK测试套件
intel-go/nff-go NFF-Go - GO的网络功能框架(原YANFF)
Pktgen 由 DPDK 提供支持的流量生成器
SPP DPDK 资源管理框架
ansyun/dpdk-ans ANS(加速网络堆栈)是DPDK本地TCP/IP堆栈,也参考FreeBSD实现。ANS提供了一个与Intel DPDK一起使用的用户空间TCP/IP堆栈。
dpdkcap/dpdkcap 基于dpdk的抓包工具
pktgen/Pktgen-DPDK 基于DPDK的包生成器
iqiyi/dpvs DPVS是一种基于DPDK的高性能四层负载均衡器
iqiyi/qnsm QNSM是基于DPDK的网络安全监控框架
rumpkernel/drv-netif-dpdk 用户空间TCP/IP栈的DPDK接口驱动程序
emmericp/MoonGen MoonGen是一个完全可编写脚本的高速包生成器,构建在DPDK和LuaJIT之上。当为每个包执行用户提供的Lua脚本时,它可以在单个CPU核心上使用64字节的包来饱和10gb /s的连接。多核支持允许更高的速率。它还具有精确和准确的时间戳和速率控制。
libmoon/libmoon libmoon是一个使用DPDK和LuaJIT进行快速灵活的包处理的库。
usnistgov/ndn-dpdk NDN-DPDK:高速命名数据网络转发器
vipinpv85/DPDK_SURICATA-4_1_1 用于软件加速的DPDK基础设施。目前正在进行RX和ACL预过滤
wangbojing/NtyTcp 单线程用户态TCP/IP协议栈,epoll实现,包含服务器案例,并发测试案例
tiglabs/jupiter Jupiter是一种基于DPDK的高性能四层网络负载均衡服务。
F-Stack/f-stack F-Stack是一个基于DPDK、FreeBSD TCP/IP栈和协程API的高性能用户空间网络开发工具包。
bytedance/ovs-dpdk 这是Open vSwitch的一个分支,我们专注于基于DPDK的Open vSwitch
napatech/daq_dpdk_multiqueue Snort DPDK DAQ模块,支持多队列-主要用于Napatech网卡

📰 论文

No. Title Translation(参考) Company
1 《Performance optimization of Snort based on DPDK and Hyperscan》 基于DPDK和hypercan的Snort性能优化 中国科学院
2 《Metronome: adaptive and precise intermittent packet retrieval in DPDK》 DPDK中自适应、精确的间歇数据包检索 罗马托尔维加塔大学
3 《NDN-DPDK: NDN Forwarding at 100 Gbps on Commodity Hardware》 在商品硬件上以100 Gbps的NDN 转发 未知
4 《Accretion of Suricta with DPDK for Traffic Monitoring using Optimized Detection System IDS/IPS》 基于优化检测系统IDS/IPS的Suricta与DPDK的增加 拉迈雅理工学院
5 《Leveraging Programmable Dataplanes for a High Performance 5G User Plane Function》 利用可编程数据平面实现高性能5G用户平面功能 印度理工学院
6 《StackMap Low-Latency Networking with the OS Stack and Dedicated NICs》 StackMap:低时延使用OS Stack和专用网卡组网 庆应义塾大学
7 《Implementing and Comparing Static and Machine-Learning Scheduling Approaches using DPDK on an Integrated CPU/GPU》 在集成CPU/GPU上使用DPDK实现和比较静态和机器学习调度方法 林雪平大学
8 《Assessing Soft- and Hardware Bottlenecks in PC-based Packet Forwarding Systems》 评估基于pc的报文转发系统的软硬件瓶颈 慕尼黑工业大学
9 《The Path to DPDK Speeds for AF XDP》 The Path to DPDK AF XDP的速度 Intel
10 《Network Function Virtualization Using Data Plane Developer’s Kit》 使用数据平面开发工具的网络功能虚拟化 美满电子科技
11 《SoftNIC: A Software NIC to Augment Hardware》 扩充硬件的软件网卡 加州大学伯克利分校
12 《Network Functions Virtualisation》 网络虚拟化功能 AT&T
13 《NetVM: High Performance and Flexible Networking using Virtualization on Commodity Platforms》 在商品平台上使用虚拟化的高性能和灵活的网络 乔治华盛顿大学
14 《Stateless Network Functions: Breaking the Tight Coupling of State and Processing》 无状态网络功能:打破状态和处理的紧密耦合 IBM
15 《Performance Contracts for Software Network Functions》 软件网络功能执行合同 瑞士洛桑联邦理工学院
16 《Re-architecting Congestion Management in Lossless Ethernet》 无损以太网拥塞管理的重新架构 北京国家信息科学与技术研究中心
17 《BMC: Accelerating Memcached using Safe In-kernel Caching and Pre-stack Processing》 使用安全内核缓存和栈前处理加速Memcached 索邦大学
18 《RedLeaf: Isolation and Communication in a Safe Operating System》 安全操作系统中的隔离和通信 加利福尼亚大学尔湾分校
19 《A Simpler and Faster NIC Driver Model for Network Functions》 一种更简单、更快的网络功能网卡驱动模型 瑞士洛桑联邦理工学院
20 《Towards including batch services in models for DPDK-based virtual switches》 在基于dpdk的虚拟交换机的模型中包含批处理服务 HAL
21 《Latency optimization and analysis through the use of a high-speed packet IO framework for high-bandwidth data processing》 延迟优化和分析,通过使用高速分组IO框架进行高带宽数据处理 德根多夫理工学院
22 《A new model for DPDK-based virtual switches》 一种基于dpdk的虚拟交换机模型 HAL
23 《FlowMon-DPDK: Parsimonious per-flow software monitoring at line rate》 FlowMon-DPDK:基于线路速率的简单的每流量软件监控 诺基亚贝尔实验室
24 《Intel® DPDK Boosts Server Appliance Performance》 英特尔®DPDK提升服务器设备性能 Intel
25 《Virtual Switch Acceleration with OVS-TC and Agilio 40GbE SmartNICs》 基于OVS-TC和Agilio 40GbE SmartNICs的虚拟交换机加速 Netronome

👷 知名工程师

  • Jim St. Leger —— 英特尔开源战略和营销总监

  • Edwin Verplanke —— 英特尔解决方案架构师

  • Harini Ramakrishnan —— Microsoft 的项目经理

  • Georgii Tkachuk —— 英特尔性能工程师

  • Honnappa Nagarahalli —— Arm 首席软件工程师

  • Yasufumi Ogawa —— NTT 服务系统实验室的研究工程师

  • Jingjing Wu —— 英特尔软件工程师

  • Jill Lovato —— Linux 基金会通信高级经理

  • Trishan de Lanerolle —— Linux 基金会技术项目经理

  • Jielong Zhou —— 蚂蚁集团

  • Yong Wang —— 中兴通讯硬件工程师

  • Xiuchun Lu —— 英特尔网络平台事业部工程师

  • Chenbo Xia —— 英特尔网络平台事业部工程师

  • Hongjun Ni —— 英特尔高级软件工程师

  • Yipeng Wang —— 英特尔高级软件工程师

  • Chenmin Sun —— 英特尔高级软件工程师

  • Jianfeng Tan —— 英特尔软件工程师

  • Hailong Wang —— 腾讯高级工程师

  • Cunming Liang —— 英特尔平台方案架构师

  • Changpeng Liu —— 英特尔资深工程师

  • Xin Zeng —— 英特尔资深工程师

  • Huai Huang —— 美团技术专家

  • Fangliang Lou —— 中兴通讯架构师

  • Liang Ma —— 英特尔资深工程师

  • Helin Zhang —— 英特尔技术经理

  • Jingjing Wu —— 英特尔资深工程师

  • Fan Zhang —— Intel 资深工程师,博士

  • Haohao Zhang —— 腾讯安全平台部高级工程师

  • Wei Wang —— Intel软件工程师

  • Hao Lin —— 太一星晨架构师

  • Zhaohui Sun —— 北京派网软件有限公司首席执行官

  • Jie Zheng —— United Stack网络虚拟化工程师

  • Kai Wang —— Yunshan资深工程师

</dr>#2021届秋招进度交流##学习路径#
全部评论
大哥,书籍分享能再分享一下吗?链接过期了
点赞 回复 分享
发布于 04-09 21:05 浙江
wc,太酷啦
点赞 回复 分享
发布于 2023-08-18 19:04 四川

相关推荐

咦哟,从去年八月份开始长跑,两处实习转正都失败了,风雨飘摇,终于拿到offer了更新一下面试记录:秋招:多部门反复面试然后挂掉然后复活,具体问了啥已经忘了,只是被反复煎炸,直至焦香😋春招:base北京抖音hr打来电话说再次复活,准备面试,gogogo北京抖音一面:六道笔试题:1.promise顺序2.定义域问题3.flat展开4.并发请求5.岛屿数量算法(力扣)深度,广度都写6.忘记了,好像也是算法,难度中等其他问题多是框架底层设计,实习项目重难点~~~秒过😇北京抖音二面:三道笔试题:(为什么只有三道是因为第三道没做出来,卡住了)1.中等难度算法(忘记啥题了,应该是个数组的)2.认识js的继承本质(手写继承模式,深入js的面相对象开发)3.手写vue的响应式(卡在了watch,导致挂掉)---后知后觉是我的注册副作用函数写得有问题,有点紧张了其他题目多是项目拷打,项目亮点,对实习项目的贡献~~~第二天,挂,but立马复活转战深圳客服当天约面深圳客服一面:六道笔试题,由于面过太多次字节,面试官叫我直接写,不用讲,快些写完😋,具体都是些继承,深拷贝(注意对数组对象分开处理,深层次对象,循环引用),加中等难度算法题~~~秒过深圳客服二面:口诉八股大战:大概囊括网络,浏览器渲染原理,动画优化,时间循环,任务队列等等(你能想到的简单八股通通拉出来鞭尸😋)算法题:笔试题6道:1:找出数组内重复的数,arr[0]-arr[n]内的数大小为[1-n],例如[1,2,2,3,3]返回[2,3],要求o(n),且不使用任何额外空间(做到了o(n),空间方面欠佳,给面试官说进入下一题,做不来了)2:原滋原味的继承(所以继承真滴很重要)3:力扣股票购买时机难度中等其他滴也忘记了,因为拿到offer后鼠鼠一下子就落地了,脑子自动过滤掉可能会攻击鼠鼠的记忆😷~~~秒过深圳客服三面:项目大战参与战斗的人员有:成员1:表单封装及其底层原理,使用成本的优化,声明式表单成员2:公司内部库生命周期管理成员3:第三方库和内部库冲突如何源码断点调试并打补丁解决成员4:埋点的艺术成员5:线上项目捷报频传如何查出内鬼成员6:大文件分片的风流趣事成员7:设计模式对对碰成员8:我构建hooks应对经理的新增的小需求的故事可能项目回答的比较流利,笔试题3道,都很简单,相信大家应该都可以手拿把掐😇~~~过过过无hr面后续煎熬等待几天直接hr打电话发offer了,希望大家也可以拿到自己心仪的offer
法力无边年:牛哇,你真是准备得充分,我对你没有嫉妒,都是实打实付出
查看19道真题和解析
点赞 评论 收藏
分享
秋盈丶:后续:我在宿舍群里和大学同学分享了这事儿,我好兄弟气不过把他挂到某脉上了,10w+阅读量几百条评论,直接干成精品贴子,爽
点赞 评论 收藏
分享
评论
1
27
分享

创作者周榜

更多
牛客网
牛客企业服务