周末來臨的深夜，當(dāng)人們熟睡之時(shí)，一群人為了工作依然挑燈夜戰(zhàn)，恒豐銀行的一場(chǎng)大型活動(dòng)在夜幕中井然有序進(jìn)行。11月25日凌晨2時(shí)至5時(shí)，恒豐銀行總行領(lǐng)導(dǎo)親自坐陣，信息科技部門、風(fēng)險(xiǎn)管理部、相關(guān)系統(tǒng)業(yè)務(wù)管理部門和相關(guān)分行等精誠合作，順利完成了數(shù)據(jù)中心同城災(zāi)備切換演練。

這次演練意義非同尋常，不但進(jìn)一步提高了恒豐銀行IT服務(wù)連續(xù)性水平，檢驗(yàn)了突發(fā)事件的應(yīng)急處置能力，還驗(yàn)證了恒豐金融云高可用架構(gòu)的有效性，切實(shí)保障了信息系統(tǒng)安全穩(wěn)定運(yùn)行。

團(tuán)結(jié)合作、高效協(xié)同，多部門聯(lián)合推進(jìn)切換演練

本次演練模擬金融云黃務(wù)主生產(chǎn)中心業(yè)務(wù)網(wǎng)出現(xiàn)全局性故障的真實(shí)場(chǎng)景，在出現(xiàn)故障后快速實(shí)施整個(gè)網(wǎng)絡(luò)區(qū)域的隔離，分鐘級(jí)整體切換到金融云中金同城數(shù)據(jù)中心相對(duì)應(yīng)網(wǎng)絡(luò)區(qū)域，恢復(fù)120個(gè)核心重要業(yè)務(wù)應(yīng)用系統(tǒng)的對(duì)外連接。這次演練，是恒豐銀行黃務(wù)、中金同城雙活運(yùn)行的系統(tǒng)架構(gòu)投產(chǎn)后的一次全面實(shí)戰(zhàn)演練。為保證演練組織和實(shí)施過程的高效無縫銜接，恒豐銀行專門成立了金融云數(shù)據(jù)中心黃務(wù)同城災(zāi)備切換演練指揮部，由恒豐銀行首席信息官司繼平擔(dān)任總指揮，負(fù)責(zé)演練準(zhǔn)備階段的方案審批和演練實(shí)施階段的指揮協(xié)調(diào)等，調(diào)動(dòng)了全行30余個(gè)專業(yè)部門、18家一級(jí)分行，近500人參與，是恒豐銀行有史以來規(guī)模最大的一次實(shí)戰(zhàn)演練。

11月25日凌晨2點(diǎn)，恒豐銀行首席信息官司繼平發(fā)布指令啟動(dòng)切換演練，系統(tǒng)“一鍵式”自動(dòng)完成切換和回切工作。演練覆蓋了全行百余個(gè)應(yīng)用系統(tǒng)，切換RTO(恢復(fù)時(shí)間目標(biāo))=5分鐘、RPO(恢復(fù)點(diǎn)目標(biāo))=0，回切RTO=3分鐘、RPO=0。在同城中心運(yùn)行期間，煙臺(tái)分行、昆明分行、北京分行和上海分行、四川廣安村鎮(zhèn)銀行組織內(nèi)部人員開展了柜面、網(wǎng)上銀行、掌上銀行、第三方支付、ATM和POS等渠道的真實(shí)交易業(yè)務(wù)驗(yàn)證。

科技引領(lǐng)、人才引領(lǐng)，依托金融云確保高可用

該次演練不僅是恒豐銀行業(yè)務(wù)連續(xù)性建設(shè)的重要組成部分，也是恒豐金融云的里程碑式事件。恒豐金融云在設(shè)計(jì)之初，就用架構(gòu)高可用、服務(wù)高可用代替設(shè)備高可用、專業(yè)高可用設(shè)計(jì)思想，自頂向下零基系統(tǒng)規(guī)劃設(shè)計(jì)了新一代多數(shù)據(jù)中心多活部署架構(gòu)，并對(duì)應(yīng)用系統(tǒng)進(jìn)行了全面的云化改造，采用負(fù)載均衡技術(shù)來實(shí)現(xiàn)應(yīng)用的高可用性，確保重要應(yīng)用系統(tǒng)具有本地高可用快速恢復(fù)、同城雙活負(fù)載均衡自動(dòng)切換、異地接近零數(shù)據(jù)丟失的快速災(zāi)備切換能力。

切換和回切過程，涉及到全行最重要的A、B類在內(nèi)的120余個(gè)應(yīng)用系統(tǒng)(占全行應(yīng)用系統(tǒng)數(shù)量72%)，整體業(yè)務(wù)恢復(fù)時(shí)間卻達(dá)到了分鐘級(jí)。如此規(guī)模的同城雙活切換演練，對(duì)于配置管理和自動(dòng)化能力的要求極高，需要依賴金融云IaaS+云平臺(tái)的大力支持。通過恒豐銀行自主研發(fā)的應(yīng)用云管平臺(tái)，對(duì)不同成熟度的云化改造的應(yīng)用系統(tǒng)進(jìn)行了統(tǒng)一軟件建模、標(biāo)準(zhǔn)配置管理，實(shí)現(xiàn)一套標(biāo)準(zhǔn)化的“一鍵式”自動(dòng)化切換方案適配絕大多數(shù)應(yīng)用系統(tǒng)的的自動(dòng)化切換，將傳統(tǒng)手工或半自動(dòng)流程變?yōu)槿詣?dòng)化操作，實(shí)現(xiàn)各個(gè)業(yè)務(wù)系統(tǒng)的并發(fā)切換，大大縮短了災(zāi)備系統(tǒng)的切換時(shí)間，提高了切換效率，達(dá)到了即切即用的水平。

此次演練的完成，標(biāo)志著恒豐銀行業(yè)務(wù)連續(xù)管理能力達(dá)到國內(nèi)銀行業(yè)先進(jìn)水平，成為我國銀行業(yè)中少數(shù)能夠成功部署同城雙活數(shù)據(jù)中心，并高效實(shí)施同城災(zāi)備切換演練的銀行之一，不僅再次證明了金融云高可用、連續(xù)性架構(gòu)的有效性，也體現(xiàn)了切換演練的實(shí)操性。