DPDK网卡多队列,suricata,小包问题

原创 已于 2022-08-18 19:52:24 修改 · 1.1k 阅读 · 3 ·
本内容遵循CC 4.0 BY-SA版权协议
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
标签
#网络安全
于 2021-02-14 22:11:19 首次发布
DPDK（Data Plane Development Kit）是一种开源软件框架，主要用于加速网络包处理。它通过提供用户空间直接访问网络接口卡（NIC）的能力，避免了内核上下文切换的开销，显著提升了网络数据包的转发效率。在x86服务器上，DPDK能实现1G/10G/40G网卡的高效转发，对比传统Linux系统，其性能提升可达70%以上。DPDK常用于高性能网络应用，如Suricata等安全检测工具的加速部署。了解DPDK的基本原理和应用，对于提升网络服务性能至关重要。

DPDK网卡多队列 - 简书

https://www.dpdk.org/ecosystem/

DPDK技术的原理是怎样的，它的作用是什么 - 今日头条 - 电子发烧友网

DPDK-Suricata应用部署 - tolun - 博客园

[Suricata]基于DPDK抓包 - 简书

DPDK技术的原理是怎样的，它的作用是什么 - 今日头条 - 电子发烧友网

DPDK-Suricata应用部署 - tolun - 博客园

编写一个属于自己的DPDK应用程序（DPDK入门向） - 灰信网（软件开发博客聚合）

https://github.com/ansyun/dpdk-nginx

DPDK简单介绍_老鼠爱旅游的博客-CSDN博客

在x86服务器，1G/10G/40G网卡包转发，64Byte小包，基本能做到70%以上的转发，而传统linux系统只能达5%左右，在网络大数据流时代，DPDK加码，优势明显。

DPDK_SURICATA-4_1_1:用于软件加速的dpdk基础结构。 目前正在研究RX和ACL预过滤器
05-06
DPDK_SURICATA-4_1_4 从3.0移植ACL-保留creating patch request for dev branch of Suricata 6.0 动机 创建简单的DPDK RX-TX，以允许数据包进入SURICATA处理流水线模式。 要做的事 将数据包缓冲区展平为完全零复制模式。 使用零拷贝PKT解码和其他层 工作正在进行中 使用https://github.com/vipinpv85/DPDK-Suricata_3.0 SW ACL对方向规则进行分类。 事情完成了 来自数据包获取阶段的数据包的零副本 添加了4种tx_buffer_flush模式-0：无，1：4、2：8、3：16 对重组后的数据包实施SW或HW对称散列。 将dpdk配置移到suricata.yaml 允许多名工人，而不是单名工人 允许带有RSS的多个RX队列（默认） 将dpd
多核流量处理优化：DPDK+Suricata的万兆网络实时检测方案.pdf
06-23
文档支持目录章节跳转同时还支持阅读器左侧大纲显示和章节快速定位，文档内容完整、条理清晰。文档内所有文字、图表、函数、目录等元素均显示正常，无任何异常情况，敬请您放心查阅与使用。文档仅供学习参考，请勿用作商业用途。 从隐写术到编码转换，从音频隐写到文件结构分析，CTF-Misc 教会你用技术的眼睛发现数据中的「彩蛋」。掌握 Stegsolve、CyberChef、Audacity 等工具，合法破解摩斯密码、二维码、LSB 隐写，在虚拟战场中提升网络安全意识与技术能力。记住：所有技术仅用于学习与竞赛！
【Suricata】04-配置Suricata 7.0.3 基于DPDK模式运行
Simo2024的博客
05-13 2955
本文介绍了Suricata基于DPDK包捕获模式的安装，运行，难点主要在DPDK驱动的安装。
基于DPDK收包的suricata的安装和运行
每天分享一个编程小知识
03-30 2590
先用lshw -C network -businfo命令找到网卡的pcie地址，然后在/usr/local/etc/suricata/suricata.yaml文件中配置suricata DPDK收包，主要修改interface和copy-iface配置。suricata是一个基于规则的入侵检测和防御引擎，功能强大，但性能可能 差强人意，不过目前最新的7版本已经支持DPDK收包了，DPDK是Intel提供的高性能网络收发包开源库，可想而知，suricata支持DPDK收包会带来性能的极大提升。
suricata中DPDK收发包线程模型和配置说明
每天分享一个编程小知识
05-11 1450
suricata中DPDK的收发包线程模型以及相关的配置。
suricata中DPDK收发包
finley_feng的博客
06-06 653
->LiveRegisterDevice（遍历pre_live_devices链表，读取pcie地址到live_devices链表中，后续提供网口pcie相关的函数都是从live_devices链表获取，比如LiveGetDeviceCount）-->LiveRegisterDeviceName（读取所有DPDK配置的pcie地址接口，放到pre_live_devices链表中）DPDK的收包也是增加了runmode-dpdkintel.c和source-dpdkintel.c两个文件。
基于DPDK抓包的Suricata安装部署
lingshengxiyou的博客
04-11 993
基于DPDK抓包的Suricata版本只更新到4.1.4，因此对DPDK版本有要求，经过测试推荐使用 DPDK-19.11.14。由于服务器开关机会导致DPDK绑定的网卡会被默认解绑，为简化重新机械的绑定工作，通过shell脚本实现自动化DPDK绑定网卡。DPDK官网下载地址：http://fast.dpdk.org/rel/dpdk-19.11.14.tar.gz。7 [root@ids-dpdk ~]# ls /usr/src/kernels/ #查看有没有相应的内核开发包。
【网络入侵检测】基于Suricata源码分析运行模式（Runmode）
不断学习，不断进步。
05-17 1146
在 Suricata 中抽象出线程、线程模块和队列三个概念：线程类似进程，可多线程并行执行操作；监听、解码、检测等网络操作被抽象为模块，由线程执行，而不同的线程可以执行一个或多个不同的模块；队列实现线程间数据包流转，三者的不同组合构成 Suricata 的运行模式。
NTA流量分析基础 and 开源项目（持续整理）
脚踏实地，不断突破自我，每天有收获就OK
03-25 2268
软中断和硬中断区别 hardirq和softirq 软中断是执行中断指令产生的，而硬中断是由外设引发的。 硬中断处理程序要确保它能够快速地完成任务，这样程序执行时才不会等待较长时间，称为上半部。 软中断处理硬中断未完成的工作，是一种推后执行的机制，属于下半部。 NAPI和DPDK的区别 在大量数据传输时，在收到硬件中断后，通过poll方式将传输的数据一次性接收，大大提高了接收数据的效率 cpu亲和性和绑核心 每个cpu核心一个线程，核心之间访问数据无需加锁。为了减少线程调度的开销..
从零搭建一个高性能软路由：基于FD.io VPP和DPDK的详细配置指南
最新发布
weixin_33417488的博客
06-03 272
本文详细介绍了如何从零搭建高性能软路由，基于FD.io VPP和DPDK的配置指南。涵盖硬件选型、系统调优、DPDK驱动绑定、VPP基础配置到高级功能实现，帮助用户构建灵活、高效的网络解决方案，特别适合家庭实验室和中小企业环境。
开源了！爱奇艺网络流量分析引擎QNSM及其应用
开发者技术前线-DevolperFront
08-05 1707
点击“开发者技术前线”，选择“星标????”在看|星标|留言, 真爱▌导读一定业务规模的互联网公司的基础设施的网络边界通常都呈现一定程度的复杂多分区的情况，如何进行有效的安全防护和控制...
Suricata与DPDK高性能数据包捕获技术详解
gitblog_00184的博客
06-08 709
在现代网络安全领域，高性能数据包处理能力至关重要。Suricata作为一款开源的网络威胁检测引擎，通过与DPDK(Data Plane Development Kit)技术的集成，实现了突破性的性能提升。本文将深入探讨Suricata如何利用DPDK实现高效数据包捕获，以及相关的高级配置技巧。 ## DPDK基础概念 DPDK是一套用于数据平面开发的工具集，它通过以下方式显著提升数据包处理性能...
DPDK AF_XDP
奋斗中拥有
05-26 5767
DPDK AF_XDP AF_XDP 是 kernel v4.18+ 新加入的一个协议族(如AF_INET), 主要使用 XDP 实现(下图是 XDP 的基本原理图). 核心原理是在 kernel NAPI poll 位置(网卡驱动内部实现, 为内核最早RX数据包位置)运行 BPF 程序, 通过不断调用 poll 方法, 最终将数据包送到正确的XDP程序处理. XDP 支持 3 种工作模式: Native XDP -运行在网卡驱动实现的 poll 函数中, 需网卡驱动支持; Offloaded X
网络入侵检测系统之Suricata(二)
诗酒趁年华
01-07 2085
Running mode Sruciata由线程和队列组成，数据包在线程间传递通过队列实现。线程由多个线程模块组成，每个线程模块实现一种功能。 Suricata有多种运行模式，这些模式与抓包驱动和IDS/IPS选择相关联。抓包驱动如：pcap, pcap file，nfqueue，ipfw，dpdk或者一个特有的抓包驱动等。Suricata在启动时只能选择某个运行模式。如-i选项表示pcap， -r表示pcapfile，-q表示nfqueue等。每一种运行模式都会初始化一些threads，queues等。模
阿里云用DPDK如何解决千万级流量并发
linuxguitu的博客
12-02 647
知识点详解： 1. Linux虚拟网卡的实现 2. DPDK的KNI讲解 3. DPDK的项目实战 阿里云用DPDK如何解决千万级流量并发
suricata中的线程管理分析
每天分享一个编程小知识
05-23 493
在runmodes.c中定义了如下的线程命名，从中大概可以看出suricata存在哪些线程，由于我们重点关注的是DPDK的workers模式收包，所以无关的线程，我们暂时不关注（已在下面的线程名后面标识出来）一文中，我们讲到了suricata中如何自定义命令，现在我们来实践一下，加入threads-list和slots-list这两个自定义命令，分别查看suricata的线程列表以及指定线程的slots。有问题或者需要自定义命令源码的朋友，可以进网络技术开发交流群提问（先加我wx，备注加群）。
linux配置内存大叶,DPDK-Suricata应用部署
weixin_29010003的博客
05-09 1041
DPDK安装部署1、 DPDK下载下载dpdk-stable-18.02.2.tar.gz并解压，进入解压后dpdk目录下。2、 设置环境变量export RTE_SDK=$PWD，exportRTE_TARGET=x86_64-native-linuxapp-gcc。建议在/etc/profile中设置，设置完后执行source /etc/profile永久生效。可执行echo$RTE_SDK进...
《深入浅出DPDK》——学习笔记——流分类
qq_41976997的博客
11-12 3299
深入浅出DPDK——流分类与多队列 流分类 流分类指的是网卡依据数据包的特性将其分类的技术。分类的信息可以以不同不方式呈现给数据包的处理者，比如将分类信息记录于描述符中，将数据包丢弃或者将流导入某个或某些队列中。 包的分类 传统包的分类：IP、TCP、UDP甚至VXLAN、NVGRE等tunnel报文，该信息可以体现在数据包的接收描述符中。 DPDK：Mbuf结构中含有相应的字段来表示网卡分析出的包的类型。 网卡设备同时可以根据包的类型确定其关键字，从而根据关键字确定其收包队列。 其中RSS和
suricata的简单探究
围城
06-26 1237
20210625- 0.引言 写过一篇文章《Suricata+ELK（Docker化部署）数据展示》，利用suricata在流量出口位置实现网络流量的事件监测。当时采用的规则，是一些开源的规则，当时使用完这些规则之后，发现误报什么的，还是挺多的。 对于suricata来说，这个软件我还是使用了非常多的，因为他本身作为一个流量处理引擎，完成的事情也挺多。所以最近就想着，能不能对他深入进行一些理解，所以在这篇文章中进行记录。 （文章属于自己阅读过程中的随感产物） 1. suricata的学习记录 本部分并没有参
《深入浅出DPDK》读书笔记（九）：流分类与多队列、流过滤、虚拟化流分类方式、流分类技术的使用
RToax
10-29 4516
Table of Contents 94.Linux内核对多队列的支持 95.DPDK与多队列 98.流分类 99.RSS 100.Flow Director 101.服务质量 102.虚拟化流分类方式 103.流过滤 104.流分类技术的使用 105.DPDK结合网卡Flow Director功能 106.DPDK结合网卡虚拟化及Cloud Filter功能 8.4 可重构匹配表 107.小结 系列文章 相关阅读 93.说起网卡多队列，顾名思义，也就是传统网卡的DMA.
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值