在多核系統(tǒng)上網(wǎng)絡(luò)數(shù)據(jù)轉(zhuǎn)發(fā)實(shí)驗(yàn)和一點(diǎn)思考

獨(dú)孤九賤

看來這篇貼子的確起到了拋磚引玉的效果了。不錯(cuò)，呵呵��！
我也覺得，目前這種多核下面，一個(gè)CPU負(fù)責(zé)一個(gè)網(wǎng)卡的隊(duì)列（接收方向）處理，我覺得還是很好的，不用在CPU之間的調(diào)度，切換，提升了不少效率吧？？

思一克

原帖由 獨(dú)孤九賤 于 2009-5-21 11:04 發(fā)表
看來這篇貼子的確起到了拋磚引玉的效果了。不錯(cuò)，呵呵�。�
我也覺得，目前這種多核下面，一個(gè)CPU負(fù)責(zé)一個(gè)網(wǎng)卡的隊(duì)列（接收方向）處理，我覺得還是很好的，不用在CPU之間的調(diào)度，切換，提升了不少效率吧？？

是的。你查multi-ring NIC就有。

Solaris12

原帖由 terryfe 于 2009-5-20 17:50 發(fā)表

前提就是硬件的多隊(duì)列嘛。所以軟RSS的實(shí)現(xiàn)在高壓力下治標(biāo)不治本啊...

嗯，關(guān)鍵是目前CPU的核數(shù)遠(yuǎn)遠(yuǎn)多于NIC的RING的數(shù)目。

即便是ixgbe這樣的硬件，64個(gè)ring,但只有16個(gè)MSI-X vector.

目前Solaris ixgbe網(wǎng)卡屬于起步階段，Crossbow剛做完第一階段，未來協(xié)議棧充分利用多核的工作還有很多事情要做。不出幾年，上千個(gè)硬件線程就會出現(xiàn)，所以，兩者是要結(jié)合使用的。

ShadowStar

原帖由 Solaris12 于 2009-5-21 12:14 發(fā)表


嗯，關(guān)鍵是目前CPU的核數(shù)遠(yuǎn)遠(yuǎn)多于NIC的RING的數(shù)目。

即便是ixgbe這樣的硬件，64個(gè)ring,但只有16個(gè)MSI-X vector.

目前Solaris ixgbe網(wǎng)卡屬于起步階段，Crossbow剛做完第一階段，未來協(xié)議棧充分利用多核 ...

Solaris12做Sparc下開發(fā)的？

x86下的CPU核數(shù)還是不多的。

terryfe

原帖由 Solaris12 于 2009-5-21 12:14 發(fā)表


嗯，關(guān)鍵是目前CPU的核數(shù)遠(yuǎn)遠(yuǎn)多于NIC的RING的數(shù)目。

即便是ixgbe這樣的硬件，64個(gè)ring,但只有16個(gè)MSI-X vector.

目前Solaris ixgbe網(wǎng)卡屬于起步階段，Crossbow剛做完第一階段，未來協(xié)議棧充分利用多核 ...

至少現(xiàn)在想達(dá)到萬兆線速的話不需要那么多核..
等到出40GE，100GE的時(shí)候估計(jì)就用得上了

Solaris12

原帖由 ShadowStar 于 2009-5-21 14:05 發(fā)表


Solaris12做Sparc下開發(fā)的？

x86下的CPU核數(shù)還是不多的。

兩個(gè)平臺都搞一點(diǎn)。


x86也越來越強(qiáng)了。八核 Nehalem EX,  Dula socket的服務(wù)器馬上就出來了，到時(shí)候16個(gè)核，不過Intel的網(wǎng)卡也升級了，128個(gè)ring,. 中斷vector估計(jì)也多了。

Solaris12

原帖由 terryfe 于 2009-5-21 14:17 發(fā)表

至少現(xiàn)在想達(dá)到萬兆線速的話不需要那么多核..
等到出40GE，100GE的時(shí)候估計(jì)就用得上了

嗯，總線到時(shí)候也肯定升級啊，這是配套的，

而且系統(tǒng)里不會只有一塊萬兆卡吧，還有其他設(shè)備呢。如果核太少了，多個(gè)設(shè)備中斷共享一個(gè)CPU, 也不好。

[ 本帖最后由 Solaris12 于 2009-5-21 14:25 編輯 ]

wangbingchao1

領(lǐng)教了

longjiangq3654

Aqie

靠,終于有人也開始研究并討論這一塊了...
其實(shí)網(wǎng)卡收包發(fā)包都是共用一個(gè)IRQ這個(gè)好象是網(wǎng)卡固件決定的,收包用NAPI的效率非常高,5405 x 2/82546EB x 4 每個(gè)卡線速收包(不發(fā)) cpu 8個(gè)核很平均,都在50%左右,但是只要有一個(gè)卡轉(zhuǎn)發(fā)性能馬上降低50%而且兩個(gè)核心全部耗完,其余空閑,兩個(gè)卡轉(zhuǎn)發(fā)在降低 50%,依此類推,可見網(wǎng)卡的瓶頸不均衡等問題不在收包上,而是發(fā)包上.不知道發(fā)包有沒有辦法做到收包這樣優(yōu)秀

還有個(gè)想法不知道linux框架能不能實(shí)現(xiàn), 如果收用一個(gè)IRQ,發(fā)用一個(gè)IRQ性能肯定會有很大提高,不過IRQ好象是由BIOS控制的,不知道能不能直接注冊兩個(gè)IRQ

[ 本帖最后由 Aqie 于 2009-6-2 09:37 編輯 ]