請教 LVM_IO_FAIL錯誤

thesins

p650雙機,通過兩臺brocade交換機連接共享存儲,用cambex做路徑冗余.正常情況下a機接管陣列上的共享卷組.當(dāng)b機接管共享卷組后,a機重啟動會遇到不能識別共享陣列的問題,機器停在檢測fc卡不能完成啟動.拔掉光纖線后重啟動,插線執(zhí)行cfgmgr,有時順利檢測到共享陣列的磁盤,有時檢測不到.基本環(huán)境和問題如上\r\n突發(fā)問題:共享卷組已接管到b機.卷組用做db2數(shù)據(jù)庫的裸設(shè)備表空間容器.下午突然出現(xiàn)系統(tǒng)高io等待,系統(tǒng)錯誤日志如下,持續(xù)短時間后數(shù)據(jù)庫崩潰.檢查表空間狀態(tài)發(fā)現(xiàn)共享卷組上屬于數(shù)據(jù)庫用戶的lv屬主被更改為root用戶.更改屬主后備份數(shù)據(jù)庫,開始讀寫速度正常,20分鐘后出現(xiàn)數(shù)據(jù)基本不讀寫的情況,持續(xù)30分鐘后又恢復(fù)正常讀寫速度.此時未注意cambex活動路徑.數(shù)據(jù)備份完成后重新啟動陣列和b機,cambex只識別到一條路徑.到目前為止數(shù)據(jù)讀寫正常.\r\n\r\n請問該采取哪些測試以確定問題發(fā)生的原因.或者從此錯誤日志可以判斷出哪些問題,請高手指教,晚上好做測試.陣列為netstor9210,本身沒有報任何錯誤信息.\r\nLABEL:          LVM_IO_FAIL\r\nIDENTIFIER:     613E5F38\r\n\r\nDate/Time:       Tue Dec 18 00:18:32 BEIS\r\nSequence Number: 33232\r\nMachine Id:      0050BE4C4C00\r\nNode Id:         jlserver2\r\nClass:           H\r\nType:            PERM\r\nResource Name:   LVDD            \r\nResource Class:  NONE\r\nResource Type:   NONE\r\nLocation:        \r\n\r\nDescription\r\nI/O ERROR DETECTED BY LVM\r\n\r\nProbable Causes\r\nPOWER, DRIVE, ADAPTER, OR CABLE FAILURE\r\n\r\n        Recommended Actions\r\n        RUN DIAGNOSTICS AGAINST THE FAILING DEVICE\r\n\r\nDetail Data\r\nPHYSICAL VOLUME DEVICE MAJOR/MINOR\r\n0030 0001 \r\nERROR CODE AS DEFINED IN sys/errno.h\r\n          16\r\nBLOCK NUMBER\r\n             499826968\r\nLOGICAL VOLUME DEVICE MAJOR/MINOR\r\n002F 0003 \r\nPHYSICAL BUFFER TRANSACTION TIME\r\n                   128\r\nSENSE DATA\r\n0000 0000 000E E560 0050 B8EC 0000 4C00 0000 0100 789B 2524 0050 B8EC 789B 03D5 \r\n0000 0000 0000 0000 \r\n\r\nLABEL:          SC_DISK_ERR2\r\nIDENTIFIER:     B6267342\r\n\r\nDate/Time:       Tue Dec 18 00:18:32 BEIS\r\nSequence Number: 33227\r\nMachine Id:      0050BE4C4C00\r\nNode Id:         jlserver2\r\nClass:           H\r\nType:            PERM\r\nResource Name:   hdisk5          \r\nResource Class:  disk\r\nResource Type:   IFT\r\nLocation:        U0.1-P2-I5/Q1-W220000D023000008-L1000000000000-W220000D023000008-L1000000000000\r\nVPD:             \r\n        Manufacturer................IFT     \r\n        Machine Type and Model......F16F-S2A2       \r\n        Part Number.................9 Infortrend\r\n        ROS Level and ID............33343252\r\n        Serial Number...............44F3D81B\r\n        EC Level..................... All righ\r\n        FRU Number..................ts reserved.\r\n        Device Specific.(Z0)........00000332F7000002\r\n        Device Specific.(Z1)........-00\r\n        Device Specific.(Z2)........opyr\r\n        Device Specific.(Z3)........ight \r\n        Device Specific.(Z4)........C) 1\r\n        Device Specific.(Z5)........99\r\n        Device Specific.(Z6)........\r\n\r\nDescription\r\nDISK OPERATION ERROR\r\n\r\nProbable Causes\r\nDASD DEVICE\r\n\r\nFailure Causes\r\nDISK DRIVE\r\nDISK DRIVE ELECTRONICS\r\nRecommended Actions\r\n        PERFORM PROBLEM DETERMINATION PROCEDURES\r\n\r\nDetail Data\r\nPATH ID\r\n           0\r\nSENSE DATA\r\n0A00 2A00 1DCA C118 0000 0804 0000 0000 0000 0000 0000 0000 0128 0000 0000 0000 \r\n0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 \r\n0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 \r\n0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 \r\n0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 \r\n0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 0000 \r\n0000 0000 0000 0001 04F4 0007 7100 0000 0001 0000 0000 0000 0000 0000 0000 0000 \r\n0000 0000 0000

jnpiero

LOGICAL VOLUME DEVICE MAJOR/MINOR\r\n002F 0003 \r\n這個是什么？

thesins

我也不知道,要怎么才能知道?

benq011

POWER, DRIVE, ADAPTER, OR CABLE FAILURE原因引起的

jnpiero

MAJOR/MINOR\r\n002F 0003 \r\n轉(zhuǎn)換一下進(jìn)制

thesins

jnpiero 能否說的詳細(xì)一點,轉(zhuǎn)換成多少進(jìn)制,然后怎么判斷 ? 002F 0003 這個代碼是什么我一點也不知道

yddll

2F=2*16+15=47\r\n03=3\r\n\r\nls -l /dev |grep \'47,  3\'

thesins

謝謝樓上\r\n截取錯誤日志的部分內(nèi)容\r\nDetail Data\r\nPHYSICAL VOLUME DEVICE MAJOR/MINOR\r\n0030 0001 \r\nERROR CODE AS DEFINED IN sys/errno.h\r\n          16\r\nBLOCK NUMBER\r\n             499826968\r\nLOGICAL VOLUME DEVICE MAJOR/MINOR\r\n002F 0003 \r\nPHYSICAL BUFFER TRANSACTION TIME\r\n                   128\r\nSENSE DATA\r\n0000 0000 000E E560 0050 B8EC 0000 4C00 0000 0100 789B 2524 0050 B8EC 789B 03D5 \r\n0000 0000 0000 0000 \r\n按樓上所說,執(zhí)行命令返回結(jié)果如下:\r\n#ls -l /dev |grep \'47,  3\'       47,3為LOGICAL VOLUME DEVICE MAJOR/MINOR\r\nbrw-rw----   1 db2inst1 db2grp1      47,  3 Dec 17 20:12 idxsale02\r\ncrw-rw----   1 db2inst1 db2grp1      47,  3 Dec 20 09:26 ridxsale02\r\n#ls -l /dev |grep \'48,  1\'      48,1為PHYSICAL VOLUME DEVICE MAJOR/MINOR\r\nbrw-------   1 root     system       48,  1 Dec 18 01:11 hdisk5\r\ncrw-------   1 root     system       48,  1 Dec 18 01:11 rhdisk5\r\n\r\n\r\nridxsale02是用做數(shù)據(jù)庫表空間容器的裸設(shè)備\r\n我看了一下，系統(tǒng)有很多l(xiāng)vm_io_fail的日志,物理設(shè)備都指向hdisk5,邏輯設(shè)備基本都是47,3.也有一個47,2是hdisk5上用做數(shù)據(jù)庫表空間容器的另一個裸設(shè)備.\r\n在這里想請問通過\r\nERROR CODE AS DEFINED IN sys/errno.h\r\n          16\r\nBLOCK NUMBER\r\n             499826968\r\nSENSE DATA\r\n0000 0000 000E E560 0050 B8EC 0000 4C00 0000 0100 789B 2524 0050 B8EC 789B 03D5 \r\n0000 0000 0000 0000 \r\n這些信息可以做哪些判斷?  \r\n另:到目前為止系統(tǒng)運行正常，沒有新的錯誤,也沒出現(xiàn)io性能問題,想請問熟悉存儲的朋友，有可能是陣列出現(xiàn)臨時性錯誤執(zhí)行自我修復(fù),導(dǎo)致當(dāng)時的性能下降嗎

hengrui

看起來你的 hdisk5 是由 Infortrend 的 RAID Controller 作出來的 RAID Disk\r\n可能這個 Logical Drive 有問題了...\r\n目前沒再出現(xiàn) Error , 但有可能 Read/Write 到有問題的磁區(qū)的檔案,Error Report 又會吐訊息...\r\n觀察一陣子看看吧...