位置: 编程技术 - 正文
推荐整理分享Linux多队列网卡的硬件的实现详解(linux 多网卡配置),希望有所帮助,仅作参考,欢迎阅读内容。
文章相关热门搜索词:linux多网卡网络配置ip地址,linux多网卡网络配置ip地址,linux 网卡队列,linux 多网卡配置,linux 多网卡配置,linux 多网卡配置,linux 多网卡配置,linux多网卡网络配置ip地址,内容如对您有帮助,希望把文章链接给更多的朋友!
多队列网卡是一种技术,最初是用来解决网络IO QoS (quality of service)问题的,后来随着网络IO的带宽的不断提升,单核CPU不能完全处满足网卡的需求,通过多队列网卡驱动的支持,将各个队列通过中断绑定到不同的核上,以满足网卡的需求。
常见的有Intel的、,Boardcom的等,下面以公司的服务器使用较多的Intel 网卡为例,分析一下多队列网卡的硬件的实现以及linux内核软件的支持。
1.多队列网卡硬件实现
图1.1是Intel 硬件逻辑图,有四个硬件队列。当收到报文时,通过hash包头的SIP、Sport、DIP、Dport四元组,将一条流总是收到相同的队列。同时触发与该队列绑定的中断。
图1.1 硬件逻辑图
2. 2.6.以前网卡驱动实现
kernel从2.6.之前不支持多队列特性,一个网卡只能申请一个中断号,因此同一个时刻只有一个核在处理网卡收到的包。如图2.1,协议栈通过NAPI轮询收取各个硬件queue中的报文到图2.2的net_device数据结构中,通过QDisc队列将报文发送到网卡。
图2.1 2.6.之前内核协议栈
图2.2 2.6.之前net_device
3. 2.6.后网卡驱动实现
2.6.开始支持多队列特性,当网卡驱动加载时,通过获取的网卡型号,得到网卡的硬件queue的数量,并结合CPU核的数量,最终通过Sum=Min(网卡queue,CPU core)得出所要激活的网卡queue数量(Sum),并申请Sum个中断号,分配给激活的各个queue。
如图3.1,当某个queue收到报文时,触发相应的中断,收到中断的核,将该任务加入到协议栈负责收包的该核的NET_RX_SOFTIRQ队列中(NET_RX_SOFTIRQ在每个核上都有一个实例),在NET_RX_SOFTIRQ中,调用NAPI的收包接口,将报文收到CPU中如图3.2的有多个netdev_queue的net_device数据结构中。
这样,CPU的各个核可以并发的收包,就不会应为一个核不能满足需求,导致网络IO性能下降。
图3.1 2.6.之后内核协议栈
图3.2 2.6.之后net_device
4.中断绑定
当CPU可以平行收包时,就会出现不同的核收取了同一个queue的报文,这就会产生报文乱序的问题,解决方法是将一个queue的中断绑定到唯一的一个核上去,从而避免了乱序问题。同时如果网络流量大的时候,可以将软中断均匀的分散到各个核上,避免CPU成为瓶颈。
图4.1 /proc/interrupts
5.中断亲合纠正
一些多队列网卡驱动实现的不是太好,在初始化后会出现图4.1中同一个队列的tx、rx中断绑定到不同核上的问题,这样数据在core0与core1之间流动,导致核间数据交互加大,cache命中率降低,降低了效率。
图5.1 不合理中断绑定
linux network子系统的负责人David Miller提供了一个脚本,首先检索/proc/interrupts文件中的信息,按照图4.1中eth0-rx-0($VEC)中的VEC得出中断MASK,并将MASK
写入中断号对应的smp_affinity中。由于eth-rx-0与eth-tx-0的VEC相同,实现同一个queue的tx与rx中断绑定到一个核上,如图4.3所示。
图4.2 set_irq_affinity
图4.3 合理的中断绑定
set_irq_affinity脚本位于
lxde桌面美化怎么样?选择LXDE作为Linux桌面的八大理由 去年年底,升级到Fedora带来的新版本KDEPlasma,想必让很多人都不习惯吧,这也直接导致我很难完成预定的工作计划。我决定尝试其他Linux桌面环境有两
linux管道及重定向详解 在linux系统中,大多数命令很简单,很少出现复杂功能的命令,每个命令往往实现一个或者几个功能十分简单的功能,我们可以通过将多个简单的命令组
Linux chroot命令用法详解 chroot命令chroot命令用来在指定的根目录下运行指令。chroot,即changerootdirectory(更改root目录)。在linux系统中,系统默认的目录结构都是以/,即是以根(ro
标签: linux 多网卡配置
本文链接地址:https://www.jiuchutong.com/biancheng/361979.html 转载请保留说明!上一篇:进程的内核栈是什么?浅谈Linux的进程内核栈(进程 内核栈)
下一篇:lxde桌面美化怎么样?选择LXDE作为Linux桌面的八大理由(桌面美化助手)
友情链接: 武汉网站建设