[原創(chuàng)]從IDC到站點(diǎn)--運(yùn)維經(jīng)驗(yàn)交流[1205更新]

smallfish

好文章，學(xué)習(xí)了，感謝樓主！

dgvri

1. 
   
2. 7，英語(yǔ)               不想說(shuō)了，我的最大痛苦就在這里
   

復(fù)制代碼

也是我永完的痛，英語(yǔ)不好搞技術(shù)太費(fèi)勁了。

1. 
   
2. 12，組織者            給你2個(gè)啥都不會(huì)的民工，再給你2000臺(tái)服務(wù)器，要求你2天把服務(wù)器裝完，你咋辦？
   

復(fù)制代碼

如果組織得當(dāng)，一切心中有數(shù)，民工干活比技術(shù)人員干的都好，深有體會(huì)

1. 
   
2. 機(jī)器選型的時(shí)候你也要為自己考慮，比如HP的ILO功能，可以讓你遠(yuǎn)程BIOS級(jí)操作服務(wù)器
   

復(fù)制代碼

ILO或IPMI可以做很多工作，直接重定向后，你就可以直接遠(yuǎn)程管理這臺(tái)服務(wù)器，就像是在顯示器前操作一樣，設(shè)BIOS，RAID，按F1-F12這些等，系統(tǒng)壞了你可以用這種方式來(lái)修
方便，不是一盤的方便。

1. 
   
2. 結(jié)果我機(jī)器至少被熱死了100臺(tái)以上，機(jī)器是HP的，機(jī)器過(guò)熱，HP會(huì)自動(dòng)關(guān)機(jī)，而且會(huì)不讓你啟動(dòng)。你崩潰不？注：不是給hp做廣告哈。
   

復(fù)制代碼

HP的一般超過(guò)31度就開(kāi)始掛了；我們?cè)谕獾赜脕?lái)搞CDN的機(jī)房都是不太正規(guī)的機(jī)房，空調(diào)老是三天兩頭出問(wèn)題，一出問(wèn)題機(jī)器就死，而且不是死一兩臺(tái)，是全死。
從ILO的WEB可以看到當(dāng)前環(huán)境溫度，可以使這個(gè)來(lái)和機(jī)房理論。

1. 
   
2. 下面是拆箱子，面對(duì)著堆積如山的2000臺(tái)服務(wù)器，我是連抬手的力氣都拿不出來(lái)。。。當(dāng)時(shí)機(jī)房只有我們公司3個(gè)人＋電信值班2個(gè)人。。。
   
3. 這時(shí)候，我的辦法是。。。我打電話找來(lái)了2隊(duì)收廢品的：
   
4. 這么多箱子，除了機(jī)器和電源線留下，里頭的導(dǎo)軌光盤等等你全部拿走，誰(shuí)拆的多誰(shuí)拿的多。。。
   
5. 最后按照我的要求幫忙搬到機(jī)柜上。。。于是我們5個(gè)人是監(jiān)工。。�？慈思也鹣渥影釞C(jī)器。
   
6. 于是人家2隊(duì)人找來(lái)了30多號(hào)人，一早上把2000臺(tái)機(jī)器全部拆箱子完畢放到機(jī)柜上。
   
7. 要是我們幾個(gè)人拆，估計(jì)......
   

復(fù)制代碼

同感同感，太同感了，我一般都是直接讓供貨商找民工來(lái)拆，紙箱子直接賣掉，08年時(shí)一個(gè)HP紙箱能賣到六塊錢，我們一幫兄弟半年的吃喝都是靠它，09年一個(gè)紙箱一塊錢
誰(shuí)說(shuō)經(jīng)濟(jì)沒(méi)有危機(jī)？

1. 
   
2. 裝系統(tǒng)
   

復(fù)制代碼

不說(shuō)了，PXE安裝LINUX，比啥都方便，而且超快無(wú)比

1. 
   
2. 我一看TMD全部是DVD，IBM的機(jī)器直接佩combo
   

復(fù)制代碼

我們的服務(wù)器除了HP DL580G5外，其它的都不帶光驅(qū)，也確實(shí)用不著。

1. 
   
2. 辦法4，HP的ILO2功能，實(shí)現(xiàn)遠(yuǎn)程分發(fā)。前提你得一臺(tái)一臺(tái)配置好BIOS里的ILO2。也是蠻痛苦的。IBM和DELL現(xiàn)在也都有這個(gè)功能，但是你在分發(fā)以前，還是得一臺(tái)一臺(tái)機(jī)器插上網(wǎng)線，配置好BIOS的IP，痛苦。然后把操作系統(tǒng)和機(jī)器的驅(qū)動(dòng)程序和后續(xù)的軟件全部做到一張DVD里，讓他自動(dòng)運(yùn)行。然后所有的服務(wù)器遠(yuǎn)程運(yùn)營(yíng)這一個(gè)ISO,最好多弄幾臺(tái)，否則一臺(tái)機(jī)器弄的慢死。
   

復(fù)制代碼

BIOS我們是找供貨商派技術(shù)人員一來(lái)設(shè)，ILO的IP是DHCP自動(dòng)分配，但是是以MAC來(lái)分配的，我們直接把ILO做成了機(jī)房的第三個(gè)網(wǎng)絡(luò)，方便遠(yuǎn)程管理。

1. 
   
2. 好了系統(tǒng)裝好了，電源線和網(wǎng)線連接完，和瀑布一樣的。這時(shí)候還是盡量把他扎一下吧。
   
3. 否則機(jī)器通風(fēng)不暢，會(huì)導(dǎo)致熱死。
   

復(fù)制代碼

上架邦線都是找民工干的，邦的不好看直接讓他們拆了重新邦

1. 
   
2. 簡(jiǎn)單辦法就是電源線扎一邊，網(wǎng)線扎一邊。有錢的公司可以買個(gè)網(wǎng)線序號(hào)標(biāo)，沒(méi)錢就自己拿膠布標(biāo)。
   

復(fù)制代碼

從下往上15臺(tái)，最下面的接交換機(jī)的確1口，2接2口，以此類推；服務(wù)器都做了bonding，第二個(gè)口接到相鄰的機(jī)柜的交換機(jī)上，從21口開(kāi)始，所以，網(wǎng)線上沒(méi)有任何的標(biāo)簽，只要知道這個(gè)規(guī)律，就搞不錯(cuò)線的順序。

1. 
   
2. 資產(chǎn)管理
   

復(fù)制代碼

以SN號(hào)為唯一識(shí)別碼，但有進(jìn)也碰到?jīng)]有SN號(hào)的情況，極少，一般是換了主板沒(méi)有把SN重新涮進(jìn)去，不過(guò)一般主機(jī)上都是SN號(hào)的標(biāo)簽，這個(gè)是錯(cuò)不了的。
資產(chǎn)編號(hào)也是打出來(lái)標(biāo)簽到貼上去，這樣SN+資產(chǎn)編號(hào)，在數(shù)據(jù)庫(kù)中一查就知道是什么時(shí)間買的，哪批，合同號(hào)，質(zhì)保時(shí)間等。

1. 
   
2. 維修也一樣了，機(jī)器壞了，或者需要重裝系統(tǒng)，按照上面的流程，一步步走一遍，就可以了。年底統(tǒng)計(jì)機(jī)房一天要干多少活，省的某些領(lǐng)導(dǎo)認(rèn)為機(jī)房人TMD都在閑著。機(jī)房的人呢？沒(méi)有流程不干活，否則白干。
   
3. 
   
4. 在流程系統(tǒng)里重啟服務(wù)器，重啟服務(wù)器要是要流程，就太慢了，那么你可以做一個(gè)綠色通道，寫清楚原因，重啟哪個(gè)機(jī)器，直接提交給相關(guān)機(jī)房人員，在你的流程系統(tǒng)里綁定一個(gè)短信網(wǎng)關(guān)，機(jī)房人員可以收到需要重啟服務(wù)器的短信。準(zhǔn)確無(wú)誤。
   
5. 
   

復(fù)制代碼

如果你的機(jī)房有一千臺(tái)HP服務(wù)器，他們就會(huì)派個(gè)專門的人員來(lái)響應(yīng)，所以，我們一般周二去機(jī)房，在此之前一般會(huì)在上周五發(fā)郵件給HP，內(nèi)容一般是有多少臺(tái)什么樣的服務(wù)器，SN號(hào)是多少，都是什么樣的故障，需要帶多少什么樣的配件等等。
這一天都需要做什么工作，在周一的時(shí)候就要發(fā)給部門所有人員，讓大家補(bǔ)充，周一下午最終確定周二去機(jī)房都做什么，怎么分工等，所以流程真的很重要。

再說(shuō)重啟，因?yàn)槲覀兊臋C(jī)房沒(méi)有人值班，我們是既當(dāng)IDC管理又當(dāng)SA，所以有死機(jī)重啟這樣的工作，直接用ILO的reboot.

1. 
   
2. 升級(jí)你的服務(wù)器
   

復(fù)制代碼

一般服務(wù)器三年報(bào)廢，能用到三年頭上的很少，所以也就很少碰到有升級(jí)的事，不過(guò)測(cè)試部門用的服務(wù)器一般都是不太好的，到是給他們搞過(guò)不少的硬件更換。
至于配件的記錄情況，我們一般是每周一小盤，一月一大盤，每次購(gòu)買的配件都記錄在案，每個(gè)配件的使用也都記錄在案，使用日期，用到哪臺(tái)機(jī)器上這些，不過(guò)配件管理這塊的確不太好管理。

1. 
   
2. 要說(shuō)的是，假如你一個(gè)機(jī)柜上放的機(jī)器比較多，比如4個(gè)6個(gè)機(jī)器一摞，恰巧壞了，恰巧一個(gè)人在機(jī)房，非得解決，怎么辦？
   
3. 簡(jiǎn)單，一個(gè)辦法，但是還是需要你有力氣，雖然有力學(xué)原理
   
4. 比如有4臺(tái)服務(wù)器，最下面的壞了，
   
5. 你可以拽住最下面的把4臺(tái)一起往出拉，拉出來(lái)一點(diǎn)，把上面3臺(tái)往后推，這樣一點(diǎn)一點(diǎn)的拉出來(lái)
   

復(fù)制代碼

我倒。。。。。。。。
我告訴大家，一定要用導(dǎo)軌，不是一般的方便，直接抽拉，而且上下的服務(wù)器絕對(duì)不受影響

1. 
   
2. 上面3臺(tái)一定要留出來(lái)一點(diǎn)，否則放下的時(shí)候，機(jī)器和機(jī)柜托板會(huì)壓住你的手，你一松手，機(jī)器震一下，硬盤就掛了。。。
   

復(fù)制代碼

太經(jīng)典了，我也這樣做過(guò)。。。。。

theAnswer

感謝樓上。。。

不過(guò)話說(shuō)。4年后看4年前的做事方法。真的很感嘆，很好玩兒。

雖然現(xiàn)在有跟過(guò)的解決辦法了，但是都是一步一步走來(lái)的。。。

fuyic

嘿嘿，樓上的，你知道不ILO1 在1.74版本之前有個(gè)BUG，輸域名經(jīng)常無(wú)法進(jìn)去得輸IP才能進(jìn)，可以刷ILO firmware 升級(jí)，但是這樣我刷掛過(guò)很多。。。。于是主板就廢了得換主板才能重新用。另外ILO2 把REMCONS 這個(gè)功能取消了，不能SSH ILO操作屏幕了，只能用VSP得在內(nèi)核重定向輸出到屏幕，簡(jiǎn)直是退化��！IPMI這個(gè)只能在系統(tǒng)下面用，系統(tǒng)掛了的時(shí)候還得靠ILO RAC IMM這種東西來(lái)搞。

    PXE其實(shí)裝多了也麻煩的，最近我就煩IBM3650的裝機(jī)，WEB配RAID那叫一個(gè)慢，還好這幾天我研究會(huì)了命令行模式，不過(guò)IBM實(shí)在是慢。最省事的還是收集好內(nèi)網(wǎng)網(wǎng)口的MAC然后做分發(fā)，一插網(wǎng)線就開(kāi)始裝了，這才是最省事的。
   
    現(xiàn)在服務(wù)器生產(chǎn)廠商為啥前面版都不留點(diǎn)貼標(biāo)簽的位置呢，資產(chǎn)號(hào) IP 沒(méi)地方貼好麻煩。

    導(dǎo)軌是方便，可有的地方都是托盤的，所以最好還是放之前規(guī)劃好一個(gè)盤子放一個(gè)機(jī)器最多不超過(guò)倆，這樣之后就方便多了，放6個(gè)。。。。那就沒(méi)法搞了，也不是沒(méi)法搞，多去幾個(gè)人，上面抬著下面抽，累點(diǎn)。

dgvri

一般的IDC都是用的托盤，但是要是自建IDC就可以按自己的要求來(lái)，把托盤全拆掉，不過(guò)要是就幾臺(tái)服務(wù)器也沒(méi)必要用導(dǎo)軌了

macaw_w

樓主辛苦了，致敬一下

uploading

留名兒！

yoohuu

theanswer 贊一個(gè)，我頂你

1984qht

頂一個(gè),確實(shí)牛的很

syl_0735

前輩牛人啊,非常佩服