2024年7月中旬,為了檢驗核心業(yè)務(wù)系統(tǒng)的階段性容災(zāi)建設(shè)成果,確保生產(chǎn)端與災(zāi)備端兩端數(shù)據(jù)一致、災(zāi)備能力可用,其運(yùn)維團(tuán)隊聯(lián)合美創(chuàng)技術(shù)專家,形成容災(zāi)演練小組,計劃通過模擬生產(chǎn)中心故障,實現(xiàn)容災(zāi)演練切換,確保容災(zāi)中心的核心備用系統(tǒng)可在預(yù)期時間內(nèi)接管業(yè)務(wù),要求RPO≤15分鐘,RTO≤30分鐘。
7月16晚,在網(wǎng)絡(luò)、業(yè)務(wù)、環(huán)境、預(yù)案等各項指標(biāo)檢查和評估通過后,執(zhí)行小組通過美創(chuàng)DRCC災(zāi)備一體化平臺,在22:01一鍵啟動核心業(yè)務(wù)系統(tǒng)的異地業(yè)務(wù)切換,在充分保障備份任務(wù)完成和人工節(jié)點驗證通過情況下,包括k8s新能源容器化應(yīng)用、人大金倉數(shù)據(jù)庫、NFS及minio存儲等在內(nèi)多個資產(chǎn)節(jié)點總耗時5分35秒順利完成切換,數(shù)據(jù)零丟失,切換完成后業(yè)務(wù)驗證正常。
切換后,業(yè)務(wù)人員充分驗證異地災(zāi)備系統(tǒng)的數(shù)據(jù)完整性和業(yè)務(wù)可用性,執(zhí)行小組于7月17日晚17點32分進(jìn)行一鍵業(yè)務(wù)回切,僅耗時5分33秒完成業(yè)務(wù)恢復(fù),公司高層通過可視化大屏,全程觀看了整個演練過程。
圖:核心業(yè)務(wù)系統(tǒng)回切
通過本次核心業(yè)務(wù)系統(tǒng)的容災(zāi)演練計劃,不僅充分驗證了核心業(yè)務(wù)系統(tǒng)容災(zāi)建設(shè)的卓越成效,還顯著增強(qiáng)了其信息系統(tǒng)抵御突發(fā)災(zāi)難性事件的能力,確保在任何災(zāi)害發(fā)生時,業(yè)務(wù)都能迅速且無縫地恢復(fù)運(yùn)行,保障了業(yè)務(wù)的連續(xù)性和穩(wěn)定性。