多線程利用多核，cpu利用率卻上不去？

warmheartli

想請教一個(gè)問題，我現(xiàn)在在做一個(gè)程序性能優(yōu)化，因?yàn)樗麄冊瓉淼氖菦]有多線程的，所以用每個(gè)節(jié)點(diǎn)起多個(gè)進(jìn)程的方式來利用多個(gè)cpu核，現(xiàn)在我把它線程化，可是有4個(gè)cpu的節(jié)點(diǎn)上起4個(gè)線程卻cpu的利用率達(dá)不到100%，而是大概60%左右晃，如果起一個(gè)線程可以達(dá)到25%（因?yàn)槭?個(gè)cpu核）。這4個(gè)線程做的同樣的工作，只是針對不同的數(shù)據(jù)而作計(jì)算（也就是按某種方式分開計(jì)算），不同線程之間不相關(guān)，沒有互斥鎖和同步之類的東西，cpu利用率上不去這會(huì)是什么原因呢？比如內(nèi)存分配上的或者cache換入換出之類的會(huì)影響嗎？麻煩大俠有時(shí)間幫我分析一下，謝謝^_^

accessory

我看了題目后的第一感覺是同步和互斥的問題。雖然LZ說沒有這些，但是也許每個(gè)線程調(diào)用的其他系統(tǒng)或者庫函數(shù)里有類似的機(jī)制。你能保證沒調(diào)用任何系統(tǒng)或者庫里帶鎖之類的函數(shù)么？

除了同步之外，另外一個(gè)可能是瓶頸在其他地方。比如I/O。以前單線程的時(shí)候體現(xiàn)不出來�，F(xiàn)在CPU利用率高了，結(jié)果I/O部分相應(yīng)慢了，造成不能把CPU利用到100％。

可以用TOP看看具體的信息，其他有一項(xiàng)似乎是I/O等待的時(shí)間。

或者用OPROFILE之類的工具看�；蛘咧苯臃治龃�碼。

warmheartli

我用strace追蹤之后發(fā)現(xiàn)有互斥鎖，您知道的可能有互斥鎖的函數(shù)都有哪些呢，我里面調(diào)用了好多數(shù)學(xué)函數(shù)

accessory

這個(gè)我就不清楚了。用STRACE似乎可以看出來有沒有調(diào)用和同步相關(guān)的函數(shù)吧？常見的有SPIN_LOCK, SEMAPHORE之類的。

GetStarted

想請教一個(gè)問題，我現(xiàn)在在做一個(gè)程序性能優(yōu)化，因?yàn)樗麄冊瓉淼氖菦]有多線程的，所以用每個(gè)節(jié)點(diǎn)起多個(gè)進(jìn)程的 ...
warmheartli 發(fā)表于 2010-01-14 16:58

CPU利用率是每個(gè)核 單獨(dú)算的吧？

GetStarted

樓主可以試試用 pthread_attr_setaffinity_np()接口將四個(gè)線程分別綁定到四個(gè)核上，這樣就一個(gè)線程只在一個(gè)核上跑。充分利用。

system888net

想請教一個(gè)問題，我現(xiàn)在在做一個(gè)程序性能優(yōu)化，因?yàn)樗麄冊瓉淼氖菦]有多線程的，所以用每個(gè)節(jié)點(diǎn)起多個(gè)進(jìn)程的 ...
warmheartli 發(fā)表于 2010-01-14 16:58

    看你的具體任務(wù)類型.

prolj

相信我，如果你C不是非常牛B的話，別寫線程了，你玩兒不起，MPI是廉價(jià)的選擇。

spook

1、CPU 是什么類型的
2、線程亂序效率
3、指令對寄存器使用
4、數(shù)據(jù)互鎖