求助：NAGIOS 探測(cè)間隔 延時(shí)太長(zhǎng)了

criver

NAGIOS 上的部署服務(wù)越來(lái)越多后，最近發(fā)現(xiàn) 發(fā)出來(lái)的報(bào)警慢了
查看狀態(tài) 盡然平均延后了 311秒多
Active Service Latency:                 5.150 / 410.883 / 311.910 sec
Active Service Execution Time:          0.005 / 10.008 / 0.544 sec
Active Service State Change:            0.000 / 54.010 / 0.400 %
Active Services Last 1/5/15/60 min:     0 / 0 / 565 / 636

寫了個(gè)測(cè)試腳本，腳本執(zhí)行時(shí)會(huì)輸出當(dāng)時(shí)的系統(tǒng)時(shí)間

結(jié)果發(fā)現(xiàn)，配置了 check_interval =  5  的時(shí)候，基本上都是相隔 7分鐘，甚至15分鐘才執(zhí)行一次探測(cè)。

本來(lái)執(zhí)行3次 15分鐘就可以發(fā)出來(lái)的報(bào)警，有時(shí)候經(jīng)過(guò)要40分鐘才能發(fā)出來(lái)。

大蝦們 有解決過(guò)類似的問(wèn)題么？？？

chenl

具體的服務(wù)數(shù)量?
系統(tǒng)負(fù)載情況如何？
系統(tǒng)配置情況？

criver

回復(fù) 2# chenl


    系統(tǒng)負(fù)載沒(méi)超過(guò)1，CPU 99%，監(jiān)控項(xiàng)目5000多。。。。

改了很多參數(shù)，都不見(jiàn)明顯效果。

想知道在不改源碼的情況能否調(diào)優(yōu)？

感覺(jué)是慢在 NAGIOS回收了結(jié)果 到 NOTIFICATION發(fā)出來(lái) 這段慢了~~~

chenl

一樓的數(shù)據(jù)都是active service的。
可以把nagios日志的debug打開(kāi)，運(yùn)行一段時(shí)間后，check一下日志。

criver

回復(fù) 4# chenl


    開(kāi)個(gè)DEBUG_LEVEL = 64 吧

試試再說(shuō)

criver

回復(fù) 4# chenl


    打開(kāi)日志后 CHECK 哪些字段？

criver

這個(gè) NAGIOS 檢測(cè)腳本 設(shè)定了5分鐘跑一次。 file 里面的時(shí)間戳是5分鐘更新一次，結(jié)果發(fā)現(xiàn)NAGIOS 檢測(cè)時(shí)間不是5分鐘跑一次，大大延時(shí)了
#tail check_log
08:30:49 --> file 08:25
08:43:26 --> file 08:40
08:55:16 --> file 08:50
09:07:15 --> file 09:05
09:19:14 --> file 09:15
09:31:23 --> file 09:30
09:41:43 --> file 09:40
09:54:03 --> file 09:50
10:05:35 --> file 10:00
10:18:04 --> file 10:15

chenl

從描述看，問(wèn)題還是出在active service check latency上。

把整個(gè)nagiostats的結(jié)果貼出來(lái)看看；
確認(rèn)一下系統(tǒng)整體的負(fù)載情況，la/cpu/mem/disk io/network io等，看是否有短板。

Active Service Latency:                 5.150 / 410.883 / 311.910 sec
這個(gè)結(jié)果，確實(shí)很糟糕。

chenl

另外，這些都嘗試過(guò)了么？
http://www.itnms.net/docs/nagios ... foption.html#tuning

zdszdszds

正常nagios監(jiān)控項(xiàng)多了以后隊(duì)列比較大，所以檢查時(shí)間會(huì)有延時(shí)。監(jiān)控項(xiàng)多了以后用,系統(tǒng)層面的監(jiān)控還是用nsca來(lái)做吧，但nsca配置太費(fèi)盡了。你可以用zabbix來(lái)做，zabbix主動(dòng)匯報(bào)機(jī)制做的還是不錯(cuò)的。