求助： linux 2.6 SMP環(huán)境，kernel， 多線程UDP發(fā)包遠(yuǎn)大于網(wǎng)絡(luò)帶寬，為什么？在線等待

xaking

如題，初始化時(shí)根據(jù)CPU個(gè)數(shù)分別指定各線程（每個(gè)線程的任務(wù)就是發(fā)UDP包，每個(gè)線程使用了10個(gè)SOCKET輪循發(fā)送）。使用sock_sendmsg進(jìn)行UDP包發(fā)送遠(yuǎn)大于網(wǎng)絡(luò)帶寬，為什么？在線等待 謝謝�。。。。。。。。�

xaking

是不是  sock_sendmsg在CPU之間 需要什么同步 或者保護(hù)之類的？？？ 急 謝謝！

cowboy_fang

計(jì)算方法?
具體數(shù)據(jù)?
或者是包沒發(fā)出去?

Solaris12

原帖由 xaking 于 2007-11-27 17:27 發(fā)表
如題，初始化時(shí)根據(jù)CPU個(gè)數(shù)分別指定各線程（每個(gè)線程的任務(wù)就是發(fā)UDP包，每個(gè)線程使用了10個(gè)SOCKET輪循發(fā)送）。使用sock_sendmsg進(jìn)行UDP包發(fā)送遠(yuǎn)大于網(wǎng)絡(luò)帶寬，為什么？在線等待 謝謝�。。。。。。。�！

這依賴于你的測(cè)試手段，首先UDP本身沒有flow control如果你的測(cè)試工具也是沒有flow control的話，

那么測(cè)試UDP發(fā)送就沒有意義，基本上測(cè)試接收就可以了，發(fā)送再多，也可能是被協(xié)議棧丟棄。

xaking

謝謝Solaris12  的回答，但是，netperf是怎么測(cè)試出網(wǎng)絡(luò)的最大帶寬的？？？ 我看來一下 不是靠檢查對(duì)方是否收到包為保準(zhǔn)的，是檢查自身發(fā)出包個(gè)數(shù)的。不過netpertf是用戶態(tài)的代碼，我不知道在kernel需要加什么控制，比如：不加MSG_DONTWAIT標(biāo)志？？？

但是 我的程序都是成功返回的。由于每個(gè)kernel線程（我為每個(gè)CPU開一個(gè)處理線程，以便balance）有10個(gè)socket輪循發(fā)包，我門可以任務(wù)包都緩存在協(xié)議棧了 但是，為什么也沒有發(fā)出去啊？ 既然發(fā)不過來了  sock_sendmsg 應(yīng)該返回失敗啊？

求高手指點(diǎn)！

xaking

具體過程是這樣的：(比如2個(gè)CPU)

netfilter---|-->|_buffer__| ----->thread(有10個(gè)socket,輪循發(fā)包)----->sock_sendmsg
                |                                           (分別發(fā)往300或者更多地址)
                |-->|_buffer__| ----->thread(有10個(gè)socket,輪循發(fā)包)----->sock_sendmsg
                                                              (分別發(fā)往300或者更多地址)

計(jì)算方法是：
統(tǒng)計(jì)發(fā)送出去的包數(shù)，每個(gè)包是1K數(shù)據(jù)，netfilter進(jìn)來的是每秒50個(gè)，如果發(fā)出的是一共1000個(gè)不同的地址的話，那么 全部成功的帶寬是：
1000個(gè)*50包/S*1K Bytes = 50MB/S
---- 其實(shí) 我測(cè)試了5000個(gè)都可以 那么
5000個(gè)*50包/S*1K Bytes = 250MB/S

但是 我的網(wǎng)絡(luò)帶寬是100Mbps＝12.5MB/s

xaking

即使 考慮緩存 也不會(huì)有這么大的差別

xaking

實(shí)際發(fā)出去的包 剛好是一定時(shí)間內(nèi)最大網(wǎng)絡(luò)帶寬的包數(shù)，表明 有包不見了（我測(cè)試差了一個(gè)數(shù)量級(jí)） 但是 sock_sendmsg 一直返回成功， 那么包哪里去了呢？？？

lonelyair

原帖由 xaking 于 2007-11-28 16:47 發(fā)表
具體過程是這樣的：(比如2個(gè)CPU)

netfilter---|-->|_buffer__| ----->thread(有10個(gè)socket,輪循發(fā)包)----->sock_sendmsg
                |                                           (分別發(fā)往300或者更 ...

沒做過這方面的,不過我想發(fā)是一方面,接收還是一方面,
而且?guī)�寬也不能那樣算�?
要知道網(wǎng)絡(luò)傳輸,接收不了,會(huì)延時(shí)等待哦.

也就是要發(fā)送成功,接收也要成功,才行吧.

延時(shí)太長,那只能丟包咯.
發(fā)再多也沒用.