雙FC卡SAN環(huán)境配置CLUSTER？

yubq

雙FC卡SAN環(huán)境連接存儲比SCSI直連存儲性能和可靠性都要好，但硬件價格較高。
兩種連接方式在配置REDHAT CLUSTER時步驟命令有什么區(qū)別嗎？

shiqiaoliang

FC SAN和ISCSI SAN 是物理層的對軟件應(yīng)該是透明的.可以不必考慮這個問題.

nntp

原帖由 yubq 于 2006-4-16 00:00 發(fā)表
雙FC卡SAN環(huán)境連接存儲比SCSI直連存儲性能和可靠性都要好，但硬件價格較高。
兩種連接方式在配置REDHAT CLUSTER時步驟命令有什么區(qū)別嗎？

multipath. 很常規(guī)的做法，價格并不高. 采用multipath的HA集群到處都是.

multipath的實現(xiàn)需要三部分組成， FC HBA 在OS里面需要有支持failover 的driver, 然后是你需要有支持failover multipath的 connection,然后你的SAN storage的controller需要能夠支持multipath. 缺一不可.

EMC和HP在我提到的第一個組成元素上提供了更多的選擇.  EMC用了powerpath, HP用了SecurePath, 這個都不是OS level的native failover driver. 而是一個中間層的user-space application。 不過2年前HP開始放棄在FC環(huán)境使用Secure path 的做法，而是跟隨 Qlogic 的腳步，開始直接采用OS layer的failver driver 做為native failover driver直接提供failover 的multipath 能力，簡化了系統(tǒng)結(jié)構(gòu)，降低了部署難度，最可貴的是native failover driver 的切換速度和故障感知能力要比以往的方案塊很多，可靠性也好很多.

有興趣可以去 qlogic 的站點察看詳細的介紹.

順便鄙視一下EMC的powerpath, 熟悉 pc server +powerpath+emc柜子+linux OS得人一定和我有同感，讓power matirx見鬼去吧.

ljhb

qlogic driver里不知道為什么出現(xiàn)了不推薦ql2xfailover這個參數(shù)的消息，據(jù)說這樣容易導(dǎo)致盤符混亂( ql2xfailoverriver failover support: 0 to disable; 1 to enable (deprecated). Enabling can cause problems to detect devs on 2ndary port.)。

所以還是推薦使用諸如rdac, powerpath之類的multipath軟件，linux自身也包含了multipath工具，但是這個有人測試過，性能很差，而且生成設(shè)備居然不支持分區(qū)，只能用lvm，呵呵。如果要用，可以參考
http://support.novell.com/techce ... s_multipathing.html

另外，一些商業(yè)軟件如Polyserve，他可以支持qlogic和emluex卡的multipath，而且支持所有能用這兩塊卡連接的san存儲，支持failover和round robin load balance，是一個比較好的選擇。

如果是IBM的存儲，試試看rdac吧，現(xiàn)在他opensource了，這一點相當(dāng)棒。
Powerpath很好用的，不知道bz怎么有偏見，我最不爽的是powerpath只支持sles的2.6.5-7.151內(nèi)核(emc anounce 下一個支持的內(nèi)核版本是2.6.5-7.201)，而實際上這個內(nèi)核根本就沒有人用。但是實際上，使用起來還是蠻方便的，而且性能提升也很明顯。

ljhb

另外，emulex的hba卡，內(nèi)核里還是不支持直接做multipath，emulex自身推了一個hbanywhere的一個冬冬，沒有用過，不好發(fā)表評論。

個人看法，multipath和HA軟件關(guān)系倒不是很大，因為不管是系統(tǒng)層面還是硬件廠商都已經(jīng)作了很多事情，HA只需要在邏輯上調(diào)用存儲功能就行了，：）

yubq

我們用的是HP EVA4000陣列。
只要FC HBA的驅(qū)動程序沒問題，配置CLUSTER沒有特殊要求吧。

ljhb

如果你是qlogic的卡的話，可以在/etc/modprobe.conf.local里加上options qla2xxx ql2xfailover=1，然后mkinitrd就可以了，別的不用管

nntp

hp 的FCA HBA adapter (for linux的) 在download section提供了 基于qla的驅(qū)動，很好用的. 不管是standalone rackmount 還是blade 上的FC adapter都可以用,里面有幾個小工具用起來很方便，如果要安裝在RFL上只要修改一下kernel image的軟連接即可.

不過也許是HP服務(wù)器的local array controller都是cpq cciss的原因，本地array volume都是/dev/cciss/cXdX，所以在混合光纖的情況下，重復(fù)名字的問題并不時特別突出.

yubq

能不能具體講一下/etc/modprobe.conf.local里加上options qla2xxx ql2xfailover=1是做什么用的？mkinitrd 具體怎么操作？

qkboy

同樣的鄙視powerpath。采用系統(tǒng)層驅(qū)動的failover driver是最穩(wěn)定的。而系統(tǒng)的multipath模塊在原來上和powerpath一樣使用dm_emc.ko，還是應(yīng)用層面的。至于穩(wěn)定性，我覺得是沒有問題的。

而options qla2xxx ql2xfailover=1是激活qla2xxx驅(qū)動的failover功能，前提是系統(tǒng)使用的qla2xxx驅(qū)動有編譯failover，詳細可以看白皮書。

mkinitrd 的操作是：
先備份系統(tǒng)使用的initd.img文件，然后執(zhí)行
mkinitrd -f /boot/initrd.img `uname -r`