2008年上半年，北方聯(lián)合電力公司采用遠(yuǎn)程異步鏡像（MirrorView）和連續(xù)數(shù)據(jù)保護(hù)（CDP）等先進(jìn)技術(shù)，建設(shè)了數(shù)據(jù)中心本地/異地容災(zāi)系統(tǒng)。
　　奧運(yùn)前夕，我們對(duì)該系統(tǒng)進(jìn)行了測試和演練，測試鏈路故障、主機(jī)故障、陣列故障、應(yīng)用系統(tǒng)誤操作誤刪除故障、SAN系統(tǒng)網(wǎng)絡(luò)及單機(jī)設(shè)備故障，還進(jìn)行了生產(chǎn)系統(tǒng)的災(zāi)難模擬，并順利將ERP應(yīng)用系統(tǒng)切換到容災(zāi)中心。所有測試都成功完成，恢復(fù)點(diǎn)目標(biāo)（RPO）和恢復(fù)時(shí)間目標(biāo)（RTO）值達(dá)到預(yù)先設(shè)計(jì)的要求。同時(shí)上述各種數(shù)據(jù)保護(hù)和切換措施，對(duì)最終用戶完全透明，用戶端不需更改任何設(shè)置，即可訪問恢復(fù)后的應(yīng)用系統(tǒng)。
　　雖然目前還沒有出現(xiàn)過真正的故障，但演練和測試讓我們有備無患。實(shí)踐表明，這一方案能夠?qū)崿F(xiàn)苛刻條件下應(yīng)用和數(shù)據(jù)的恢復(fù)。在此，我介紹一下北方聯(lián)合電力公司數(shù)據(jù)中心本地/異地容災(zāi)系統(tǒng)建設(shè)的經(jīng)驗(yàn)和體會(huì)，供業(yè)內(nèi)外同行參考。
　　系統(tǒng)概況
　　北方聯(lián)合電力公司數(shù)據(jù)中心本地/異地容災(zāi)系統(tǒng)主要包括本地機(jī)房的近線復(fù)制和遠(yuǎn)程機(jī)房的異步復(fù)制兩個(gè)部分。系統(tǒng)架構(gòu)如圖所示。

　　容災(zāi)中心和總部各采用2臺(tái)HP主機(jī)和2臺(tái)CISCO 9000系列智能交換機(jī)，互為備份，組成高性能、全冗余的存儲(chǔ)區(qū)域網(wǎng)（SAN）。容災(zāi)中心與總部之間直接通過Cisco MDS 9000連接，采用FCoIP協(xié)議，鏈路帶寬為622Mbps。
　　在總部機(jī)房，采用一臺(tái)EMC CLARiiON CX3-80作為數(shù)據(jù)存儲(chǔ)主陣列，以HP EVA6000作為近線復(fù)制存儲(chǔ)。采用連續(xù)數(shù)據(jù)保護(hù)（CDP）技術(shù)，以2臺(tái)EMC Recover Point 應(yīng)用裝置組成群集，負(fù)責(zé)把HP主機(jī)到CX3-80的寫數(shù)據(jù)重定向到EVA6000上。
　　在200公里以外的達(dá)拉特電廠，我們建設(shè)了容災(zāi)中心，主要設(shè)備包括1臺(tái)EMC CLARiiON CX3-20和2臺(tái)HP主機(jī)，為總部機(jī)房提供遠(yuǎn)程的應(yīng)用級(jí)容災(zāi)保護(hù)。核心技術(shù)采用EMC公司的遠(yuǎn)程異步鏡像（MirrorView），結(jié)合CISCO9016光纖交換機(jī)的特性，可以由CX3-80直接把生產(chǎn)數(shù)據(jù)同步到CX3-20上，不增加主機(jī)負(fù)擔(dān)。
　　建設(shè)背景
　　北方電力成立后在生產(chǎn)、基建、經(jīng)營等各方面取得了輝煌的成就，但在市場競爭中面臨著具大的考驗(yàn)。隨著其它發(fā)電公司新機(jī)組的相繼投產(chǎn)，北方電力發(fā)電總裝機(jī)容量在蒙西電網(wǎng)的比例逐年縮小；平均單機(jī)容量小，老舊設(shè)備多；發(fā)電負(fù)荷率較前兩年大幅降低，發(fā)電量難以保證；再加上員工總額大、負(fù)擔(dān)多等眾多因素，使公司在企業(yè)核心競爭力方面與其它發(fā)電公司存在較大差距。因此，公司決定采用國際先進(jìn)的信息技術(shù)和手段，利用先進(jìn)的管理思想和理念內(nèi)部挖潛，向管理要效益，提高公司的管控能力，走出一條能夠使北方公司做強(qiáng)做大的健康發(fā)展之路。
　　四年來，我們按照“統(tǒng)一領(lǐng)導(dǎo)、統(tǒng)一規(guī)劃、統(tǒng)一標(biāo)準(zhǔn)、統(tǒng)一管理、統(tǒng)一實(shí)施”的五統(tǒng)一原則，遵循集團(tuán)化大集中的管理思想，對(duì)公司各個(gè)二級(jí)單位的信息進(jìn)行標(biāo)準(zhǔn)化的梳理，逐步建成了覆蓋公司本部至25個(gè)二級(jí)單位的信息化基礎(chǔ)平臺(tái)和信息化應(yīng)用系統(tǒng)。
　　信息標(biāo)準(zhǔn)化方面，依靠公司自身的技術(shù)力量，完成了13個(gè)發(fā)電廠10萬以上共54臺(tái)機(jī)組（小機(jī)組退役）、總裝機(jī)容量為1379萬KW的KKS設(shè)備編碼工作，形成了公司統(tǒng)一的設(shè)備編碼體系；完成了公司統(tǒng)一的物資編碼，建立了公司統(tǒng)一的編碼標(biāo)準(zhǔn)，形成了統(tǒng)一的物資編碼體系。制定了《北方電力信息化建設(shè)管理規(guī)范》等十個(gè)管理制度和標(biāo)準(zhǔn)規(guī)范，在行業(yè)內(nèi)處于領(lǐng)先水平。
　　IT基礎(chǔ)管理方面，建立了公司本部至所屬發(fā)電廠的622M和155M及本部至各所屬單位2M的兩張廣域網(wǎng)系統(tǒng)，完成了所屬新建及老廠的統(tǒng)一標(biāo)準(zhǔn)化局域網(wǎng)建設(shè)；建立了SAP開發(fā)、測試、生產(chǎn)運(yùn)行系統(tǒng)及門戶、檔案、基建MIS等多個(gè)管理系統(tǒng)硬件平臺(tái)。建立了公司Apsec VPN及SSL VPN加密數(shù)據(jù)通道，實(shí)現(xiàn)了公司本部及所屬單位的移動(dòng)辦公；完成了公司本部至25個(gè)二級(jí)單位站點(diǎn)的視頻會(huì)議系統(tǒng)。
　　管理信息系統(tǒng)方面，從2005年3月達(dá)拉特電廠試點(diǎn)開始至2007年3月包頭第三熱電廠驗(yàn)收，共完成了所有（13個(gè)）發(fā)電廠的生產(chǎn)管理系統(tǒng)BFS++、實(shí)時(shí)數(shù)據(jù)庫PI的實(shí)施工作，并全部進(jìn)行了實(shí)用化驗(yàn)收；從2006年2月本部及達(dá)電試點(diǎn)實(shí)施開始，目前已經(jīng)完成了本部及所屬8個(gè)電廠的信息門戶系統(tǒng)實(shí)施工作并進(jìn)行了實(shí)用化驗(yàn)收，2007的7月9日，該項(xiàng)目由電機(jī)工程學(xué)會(huì)主持評(píng)審為國內(nèi)領(lǐng)先水平；采用大集中的方式，在全公司范圍內(nèi)實(shí)施了SAP的 ERP項(xiàng)目（財(cái)務(wù)及預(yù)算、物資管理兩個(gè)模塊），并與生產(chǎn)管理系統(tǒng)BFS++實(shí)現(xiàn)了接口；公司所有二級(jí)單位實(shí)施了OA并與本部上下互聯(lián)，實(shí)現(xiàn)了整個(gè)公司的全電子化公文流轉(zhuǎn)、合同審批流轉(zhuǎn)以及統(tǒng)一域名下的集團(tuán)電子郵件等功能；在所有新擴(kuò)建項(xiàng)目基建過程中（10個(gè)基建項(xiàng)目）統(tǒng)一實(shí)施應(yīng)用了基建MIS系統(tǒng)；在本部及5個(gè)發(fā)電廠推廣應(yīng)用了統(tǒng)一的檔案管理信息系統(tǒng)。
　　隨著各個(gè)管理信息系統(tǒng)的實(shí)施，信息系統(tǒng)已經(jīng)成為公司生產(chǎn)經(jīng)營管理中須臾不能離開的工具，信息系統(tǒng)的容災(zāi)備份勢(shì)在必行。
　　技術(shù)選擇
　　通過對(duì)公司之前的信息平臺(tái)及相關(guān)技術(shù)進(jìn)行分析，我們認(rèn)為，傳統(tǒng)備份陣列+磁帶庫的方式可能存在幾方面的缺點(diǎn)：一是傳統(tǒng)備份恢復(fù)時(shí)間太長。二是傳統(tǒng)的直連存儲(chǔ)（DAS）方式，讓IT存儲(chǔ)系統(tǒng)隨著企業(yè)的快速成長而變得繁復(fù)累贅，因此需要進(jìn)行系統(tǒng)資源的整合。三是以往用磁帶進(jìn)行備份，不僅占用大量的人力資源，人工操作也容易造成失誤。此外，使用磁帶備份的數(shù)據(jù)保護(hù)中30%會(huì)失敗，且難以驗(yàn)證數(shù)據(jù)的可恢復(fù)性。四是陣列發(fā)生故障后短時(shí)間無法恢復(fù)應(yīng)用系統(tǒng)運(yùn)行。
　　因此，北方電力決定建立一個(gè)近線虛擬存儲(chǔ)系統(tǒng)，應(yīng)用系統(tǒng)可以不同的存儲(chǔ)設(shè)備上透明地切換。近線虛擬存儲(chǔ)系統(tǒng)首期主要是對(duì)核心數(shù)據(jù)庫小型機(jī)的數(shù)據(jù)進(jìn)行備份，其次要兼顧OA、門戶、基建等服務(wù)器的近線數(shù)據(jù)存儲(chǔ)和備份。
　　CDP（連續(xù)數(shù)據(jù)保護(hù)技術(shù)）是一項(xiàng)新興的技術(shù)，也是目前最熱門的數(shù)據(jù)保護(hù)技術(shù)之一。它可以捕捉到一切文件級(jí)或數(shù)據(jù)塊級(jí)別的數(shù)據(jù)寫改動(dòng)，可以對(duì)備份對(duì)象進(jìn)行更加細(xì)化的粒度的恢復(fù)，可以恢復(fù)到任意時(shí)間點(diǎn)。CDP技術(shù)包括兩種：一種是準(zhǔn)CDP技術(shù)（Near CDP），它只能恢復(fù)部分指定時(shí)間點(diǎn)的數(shù)據(jù)，有點(diǎn)類似于存儲(chǔ)系統(tǒng)的邏輯快照。另一種是TrueCDP，我們稱之為真正的CDP，它可以恢復(fù)指定時(shí)間段內(nèi)的任何一個(gè)時(shí)間點(diǎn)。我們的目標(biāo)是，能夠恢復(fù)任意時(shí)間點(diǎn)的數(shù)據(jù)。
　　此外，我們還考慮到：新的ERP主存儲(chǔ)要具有承擔(dān)數(shù)據(jù)中心存儲(chǔ)池的能力；將主存儲(chǔ)設(shè)備內(nèi)的數(shù)據(jù)連續(xù)備份到近端的存儲(chǔ)設(shè)備上；要求該套系統(tǒng)可以兼容其它廠家的存儲(chǔ)產(chǎn)品；當(dāng)主存儲(chǔ)發(fā)生故障時(shí)可以手動(dòng)切換到近端備份存儲(chǔ)設(shè)備；可保障主存儲(chǔ)發(fā)生故障后數(shù)據(jù)丟失量不大于10分鐘；新系統(tǒng)要支持異構(gòu)存儲(chǔ)環(huán)境，可以支持對(duì)windows、HP UNIX、AIX、LNIX等操作系統(tǒng)在存儲(chǔ)設(shè)備上的備份恢復(fù)；數(shù)據(jù)遷移要安全可靠，不允許數(shù)據(jù)丟失，等等技術(shù)因素。
　　通過對(duì)主流的供應(yīng)商進(jìn)行綜合考察，我們認(rèn)為，EMC的解決方案最符合要求。它的CLARiiON CX3存儲(chǔ)系統(tǒng)性能不錯(cuò)，應(yīng)用很流行；它的RecoverPoint軟件能夠恢復(fù)任意時(shí)間點(diǎn)的數(shù)據(jù)；它的MirrorView遠(yuǎn)程復(fù)制軟件可以直接在存儲(chǔ)設(shè)備之間進(jìn)行，不需要主機(jī)，大大減輕主機(jī)的負(fù)擔(dān)；它在兼容性和異構(gòu)支持方面表現(xiàn)都不錯(cuò)。所以，我們最后選擇了EMC的方案。現(xiàn)在來看，無論是對(duì)技術(shù)方向還是供應(yīng)商的選擇，結(jié)果都還不錯(cuò)。
　　意外效益
　　容災(zāi)系統(tǒng)實(shí)現(xiàn)對(duì)信息系統(tǒng)的多重保護(hù)，這一點(diǎn)勿容贅述。
　　容災(zāi)系統(tǒng)給我們帶來了另一個(gè)收獲是，由于容災(zāi)系統(tǒng)和生產(chǎn)系統(tǒng)的數(shù)據(jù)是同步的，我們可以將備份系統(tǒng)用作仿真測試系統(tǒng)。上馬新系統(tǒng)時(shí)，可以在測試系統(tǒng)上進(jìn)行，新舊系統(tǒng)并行一段時(shí)間后正式切換。例如，我們可以快速地實(shí)現(xiàn)整個(gè)ERP系統(tǒng)的仿真系統(tǒng)。因?yàn)榭梢曰謴?fù)任意時(shí)間點(diǎn)的數(shù)據(jù)，所以我們可以在這個(gè)系統(tǒng)上做任何的測試，測試完了再把數(shù)據(jù)恢復(fù)回來。今年下半年實(shí)施新快速轉(zhuǎn)換的時(shí)候，我們本來是要投資購買一個(gè)陣列去實(shí)現(xiàn)這個(gè)功能，但是通過把災(zāi)備系統(tǒng)用起來，讓我們投資成本節(jié)約了200多萬。
　　下一步，我們將把OA、信息門戶等更多的系統(tǒng)整合到主存儲(chǔ)中來，充分發(fā)揮主存儲(chǔ)作為存儲(chǔ)池的作用，簡化管理，并讓更多的系統(tǒng)得到保護(hù)；同時(shí)將在信息安全、應(yīng)用系統(tǒng)整合及統(tǒng)一身份認(rèn)證等方面做進(jìn)一步的工作。