資源池后端存儲服務(wù)狀態(tài)異常的問題處理

故障現(xiàn)象某資源池在巡檢過程中檢查服務(wù)狀態(tài)，其中云盤后端的服務(wù)狀態(tài)為down，如下圖所示，影響虛擬機(jī)云盤的生命周期管理操作。

故障分析

產(chǎn)生資源池后端存儲服務(wù)狀態(tài)異常的原因可能有如下四個：

后端存儲異常。

控制節(jié)點(diǎn)和存儲后端的帶外地址不通。

控制節(jié)點(diǎn)cinder-volume服務(wù)異常。

控制節(jié)點(diǎn)和存儲后端對接信息錯誤。

根據(jù)分析原因，進(jìn)行問題排查：

1. 登錄后端存儲管理頁面，無異常告警，存儲運(yùn)行狀態(tài)異常。

2. 在控制節(jié)點(diǎn)Ping存儲后端的帶外地址，能夠正常通訊，如下圖所示。

3. 檢查控制節(jié)點(diǎn)/var/log/cinder/volume.log日志，確認(rèn)為對接的賬號密碼錯誤導(dǎo)致服務(wù)狀態(tài)down，和運(yùn)維人員確認(rèn)最近有做過密碼重置操作，如下圖所示。

4. 檢查存儲后端的事件日志，有大量的賬號密碼訪問異常，確認(rèn)為對接的賬號密碼錯誤導(dǎo)致，如下圖所示。

故障處理1. 在后端存儲上解鎖賬號密碼，同時(shí)重置密碼，如下圖所示。

2. 登錄Daisy界面，在“存儲設(shè)備對接”界面選擇后端存儲，單擊編輯，修改對接賬戶密碼，如下圖所示。

3. 在主控制節(jié)點(diǎn)執(zhí)行systemctl restart openstack-cinder-volume命令，重啟cinder-volume服務(wù)。

4. 檢查服務(wù)狀態(tài)正常，如下圖所示。

審核編輯：湯梓紅