在腳本中執(zhí)行后臺(tái)命令時(shí)，需要執(zhí)行wait命令，否則會(huì)內(nèi)存泄露？(確認(rèn)需要wait)

humjb_1983

又來請教各位大師
在bash腳本中執(zhí)行后臺(tái)命令(加&)時(shí)，需要執(zhí)行wait命令回收后臺(tái)子進(jìn)程的資源，否則會(huì)內(nèi)存泄露？是這樣的么？
不知這種情況下wait是否是標(biāo)準(zhǔn)用法？是否一定需要？
謝謝！
---------
問題解決，在這里貼一下，請大家以后注意使用wait吧，共勉。。。。
這個(gè)問題經(jīng)過深入分析，已有基本結(jié)論：
在腳本中，調(diào)用后臺(tái)執(zhí)行的命令，確實(shí)應(yīng)該wait，不wait的話，確有有內(nèi)存泄露的情況，不信可以自己寫個(gè)死循環(huán)調(diào)用后臺(tái)命令的腳本，很容易復(fù)現(xiàn)的。
可以google搜一下腳本多任務(wù)，可以看到別人寫的類似的腳本中，有很多都是用了wait的。

通過內(nèi)存泄露檢測，和bash相關(guān)代碼和原理分析，問題產(chǎn)生的原因簡單如下：
1、實(shí)際的內(nèi)存泄露并不是被調(diào)用的后臺(tái)進(jìn)程自身產(chǎn)生的，泄露之處在于bash，bash調(diào)用后臺(tái)命令，后臺(tái)命令執(zhí)行結(jié)束后，自身占用的資源(包括內(nèi)存)應(yīng)該是成功回收的(bash中應(yīng)該考慮了SIGCHLD信號(hào)的處理)，但問題關(guān)鍵在于：bash自己會(huì)為每一個(gè)后臺(tái)子進(jìn)程創(chuàng)建一個(gè)數(shù)據(jù)結(jié)構(gòu)，用于保存后臺(tái)進(jìn)程的返回值，否則bash中就無法了解后臺(tái)子進(jìn)程的退出狀態(tài)了，這在一些情況下，確實(shí)是需要了解的。所以，泄露的內(nèi)存就在這個(gè)數(shù)據(jù)結(jié)構(gòu)上，如果不用wait，那么每個(gè)后臺(tái)子進(jìn)程對應(yīng)的數(shù)據(jù)結(jié)構(gòu)就無法回收。
2、理論上，泄露的數(shù)據(jù)結(jié)構(gòu)應(yīng)該很小，不會(huì)產(chǎn)生大的影響，但是另一個(gè)關(guān)鍵在于glibc的堆實(shí)現(xiàn)，如果死循環(huán)中不斷的創(chuàng)建后臺(tái)子進(jìn)程，那就不斷的會(huì)有相應(yīng)的數(shù)據(jù)結(jié)構(gòu)分配，而其占用的內(nèi)存很可能頂在了堆頂，我們知道，如果堆頂?shù)膬?nèi)存不能回收，那么堆頂之下的內(nèi)存也是不能回收的，所以由于該數(shù)據(jù)結(jié)構(gòu)的泄露，可能導(dǎo)致更大的內(nèi)存泄露。經(jīng)過分析故障當(dāng)時(shí)bash進(jìn)程的堆分布情況，確實(shí)可以確認(rèn)這一點(diǎn)。

綜上，這個(gè)問題由于bash和glibc和腳本用法共同導(dǎo)致。
所以，各位，如果后面要在bash中調(diào)用后臺(tái)命令，建議都wait一下吧。。。。

Shell_HAT

求出處

humjb_1983

Shell_HAT 發(fā)表于 2014-07-17 19:54
求出處

呵呵，最近遇到一個(gè)奇特的問題，在腳本中反復(fù)調(diào)用后臺(tái)命令（后臺(tái)命令執(zhí)行后會(huì)退出），發(fā)現(xiàn)一段時(shí)間后，內(nèi)存占用明顯增加，有內(nèi)存泄露的痕跡。
經(jīng)過前期使用內(nèi)存泄露檢測工具的分析，發(fā)現(xiàn)確有這樣的跡象，搜了一下，好像有后臺(tái)命令需要使用wait命令回收的說法，特來求證。。。

謝謝！

expert1

man wait，跟memor leak無關(guān)啊

fxpbupt

樓主是想表達(dá)僵尸進(jìn)程么

humjb_1983

回復(fù) 4# expert1
呵呵，手冊中是沒有提到~，但實(shí)際上好像確實(shí)有問題，寫個(gè)簡單的測試用例，多跑會(huì)能復(fù)現(xiàn)。。。。

   

humjb_1983

fxpbupt 發(fā)表于 2014-07-17 23:00
樓主是想表達(dá)僵尸進(jìn)程么

不是僵尸，這種情況下bash應(yīng)該是處理了SIGCHLD信號(hào)的，不用wait也不會(huì)有僵尸。
說的是內(nèi)存泄露的問題。

seesea2517

沒聽過這樣的說法，會(huì)不會(huì)你運(yùn)行的腳本調(diào)用的一些程序存在內(nèi)存泄露？
或者說，你用同樣的腳本，加了 wait 就不會(huì)內(nèi)存泄露了？

humjb_1983

seesea2517 發(fā)表于 2014-07-18 10:24
沒聽過這樣的說法，會(huì)不會(huì)你運(yùn)行的腳本調(diào)用的一些程序存在內(nèi)存泄露？
或者說，你用同樣的腳本，加了 wait  ...

對的加了wait，就沒有內(nèi)存泄露了。。。

seesea2517

回復(fù) 9# humjb_1983


    這真是奇怪的現(xiàn)象。關(guān)注樓主進(jìn)展……