災(zāi)備系統(tǒng)確保業(yè)務(wù)高連續(xù)性

申請(qǐng)免費(fèi)試用、咨詢電話：400-8352-114

　　中國移動(dòng)山東公司（以下簡稱“山東移動(dòng)”）為保障業(yè)務(wù)連續(xù)性、提高用戶體驗(yàn)，在2009年完成了三中心的容災(zāi)系統(tǒng)建設(shè)。日前，記者采訪了中國移動(dòng)山東公司賬務(wù)中心崔可升副主任，在給記者介紹山東移動(dòng)的三中心災(zāi)備系統(tǒng)的過程中，崔主任給出的這樣一組數(shù)據(jù)給記者留下了深刻的印象：

　　山東移動(dòng)目前擁有用戶5000多萬；系統(tǒng)的規(guī)模、邏輯主機(jī)數(shù)量已經(jīng)接近500臺(tái)；系統(tǒng)的數(shù)據(jù)量4PB；在每年1-2億的IT投入中，有2/3的投入是用于保證數(shù)據(jù)安全性和業(yè)務(wù)連續(xù)性的。

　　確保“三無產(chǎn)品”萬無一失

　　如此大的用戶規(guī)模和數(shù)據(jù)量，如何保證BOSS系統(tǒng)的業(yè)務(wù)連續(xù)性萬無一失，成為了山東移動(dòng)面臨的首要挑戰(zhàn)。崔主任說：“山東移動(dòng)的領(lǐng)導(dǎo)曾經(jīng)將BOSS系統(tǒng)的重要性形象的總結(jié)為‘三無產(chǎn)品’，三無是指：無可替代、無與倫比、無以復(fù)加。一句話，移動(dòng)公司BOSS系統(tǒng)介于網(wǎng)絡(luò)側(cè)和用戶側(cè)，BOSS系統(tǒng)的計(jì)費(fèi)數(shù)據(jù)來源于網(wǎng)絡(luò)側(cè)，用戶通過BOSS系統(tǒng)進(jìn)行產(chǎn)品訂購等業(yè)務(wù)辦理，并查詢服務(wù)使用情況。，所以它處的環(huán)節(jié)是非常非常重要的。比如你的電話無意中被停機(jī)了，或者充了值遲遲不能打出電話，用戶滿意度會(huì)大大降低。”BOSS系統(tǒng)的安全性關(guān)系到山東5000多萬用戶的用戶體驗(yàn)，也是企業(yè)的重中之重，為了降低風(fēng)險(xiǎn)，確保BOSS系統(tǒng)有備無患，萬無一失，山東移動(dòng)在業(yè)務(wù)連續(xù)性方面的建設(shè)也一直在不斷的進(jìn)步。

　　在2002年到2003年，山東移動(dòng)實(shí)現(xiàn)了全省BOSS系統(tǒng)大集中。隨著系統(tǒng)和數(shù)據(jù)的集中完成，也增加了系統(tǒng)的風(fēng)險(xiǎn)，為了保證業(yè)務(wù)的連續(xù)性，山東移動(dòng)建設(shè)了一些簡單的應(yīng)急系統(tǒng)。應(yīng)急系統(tǒng)的構(gòu)建是在2004年完成的。山東移動(dòng)在其他的存儲(chǔ)設(shè)備上建立一個(gè)空間，做一個(gè)BCV（業(yè)務(wù)連續(xù)性卷），把數(shù)據(jù)復(fù)制到另一份，這些數(shù)據(jù)可以提供備份恢復(fù)的功能，這就是簡單的容災(zāi)系統(tǒng)。

　　2005年山東移動(dòng)的主備級(jí)容災(zāi)系統(tǒng)上線了。建設(shè)主備級(jí)備份系統(tǒng)的契機(jī)是山東移動(dòng)建設(shè)了一個(gè)新中心。新中心建成后，山東移動(dòng)把所有的業(yè)務(wù)遷到新的中心里面去；然后把原有的老的系統(tǒng)進(jìn)行了一個(gè)改造，做成一個(gè)主備級(jí)的容災(zāi)系統(tǒng)。但是，主備級(jí)容災(zāi)系統(tǒng)也存在著一些問題，首先是對(duì)于現(xiàn)有系統(tǒng)在出現(xiàn)容災(zāi)的情況下，到底能不能完成任務(wù)?因?yàn)橹鱾渲行拈g的系統(tǒng)設(shè)備容量和能力不同，所以對(duì)于容災(zāi)的安全性存在著一定的疑問。另外一方面，在主備級(jí)容災(zāi)的過程中，新建的機(jī)房，需要人員值守等等一些成本，一年、兩年，可能幾年計(jì)算機(jī)設(shè)備更新比較快，4、5年一個(gè)周期設(shè)備就折舊差不多了，這樣大量的設(shè)備不能得到應(yīng)用，對(duì)于山東移動(dòng)來說也是一個(gè)很大的浪費(fèi)。反觀生產(chǎn)中心，可能在有需要業(yè)務(wù)高峰期的時(shí)候有限資源分配不夠，另外一個(gè)中心卻有資源限制，主備中心間的資源無法平衡，也就帶來了一個(gè)矛盾的問題。

　　07年開始，在原來主備級(jí)容災(zāi)的基礎(chǔ)上，山東移動(dòng)實(shí)行了雙中心容災(zāi)方式，雙中心容災(zāi)方式解決了備用中心容災(zāi)達(dá)不到充分發(fā)揮的問題。當(dāng)然用雙中心的容災(zāi)方式，對(duì)管理來說是更加增加了復(fù)雜度，技術(shù)實(shí)現(xiàn)方面也提出了很多很高的要求。

　　目前，山東移動(dòng)用戶量越來越多，而兩個(gè)中心每個(gè)中心承載的業(yè)務(wù)也是非常大，考慮降低風(fēng)險(xiǎn)的方式，于是山東移動(dòng)建立了第三個(gè)物理中心。原則上每一個(gè)中心承載的用戶數(shù)不超過一定數(shù)量（如2000萬戶），這樣的話相當(dāng)于把風(fēng)險(xiǎn)分散在多個(gè)中心，這是山東移動(dòng)設(shè)計(jì)三中心系統(tǒng)的核心思想。新建中心在空間、電影等配套環(huán)境等比較充足，山東移動(dòng)現(xiàn)在基本上1對(duì)2的關(guān)系——一個(gè)中心承擔(dān)了全省1/2的量，另外兩個(gè)中心各承擔(dān)1/4的量，這是從生產(chǎn)角度來看。與此同時(shí)，三中心還互相之間還承擔(dān)了備份的任務(wù)。目前三個(gè)中心的業(yè)務(wù)已經(jīng)完全上線了，運(yùn)行非常好。這三個(gè)中心就任何一個(gè)中心出問題，其他兩個(gè)中心都能把業(yè)務(wù)接過來，這樣整個(gè)服務(wù)質(zhì)量、整個(gè)客戶的滿意度大大提升了。

　　高性能與ROI的平衡

　　在移動(dòng)行業(yè)內(nèi)，有一個(gè)衡量信息化成本的有效指標(biāo)，就是根據(jù)發(fā)展一位新的用戶，移動(dòng)所需的費(fèi)用的多少。在山東移動(dòng)，發(fā)展一個(gè)新用戶所需的BOSS系統(tǒng)投資費(fèi)用不到其他省份的二分之一，如何實(shí)現(xiàn)如此高的ROI，崔主任為我們介紹了山東移動(dòng)的高效之道：

　　首先，信賴高端產(chǎn)品。山東移動(dòng)現(xiàn)在所有的主機(jī)全是高端的IBM Power 595，存儲(chǔ)實(shí)際上也是虛擬的，當(dāng)然是從我們規(guī)劃來看。我們存儲(chǔ)目前IBM現(xiàn)在也是占了絕大部分，采用IBM也是最高端的DS8300，這款產(chǎn)品非常不錯(cuò)，包括我們的BOSS系統(tǒng)、經(jīng)營分析系統(tǒng)，都采用大量的IBM存儲(chǔ)系統(tǒng)。選擇高端的機(jī)器是因?yàn)樗陌踩蕴岣吡?，我們就是用IBM最高端的機(jī)器，它的性能很好，安全性很好，這是一個(gè)方面。

　　另外，山東把IBM的虛擬技術(shù)發(fā)揮的淋漓盡致，我們?nèi)抠I的都是大的設(shè)備，然后就像切蛋糕一樣，切成一小塊一小塊的，因?yàn)檫@個(gè)切都是動(dòng)態(tài)的切，根據(jù)業(yè)務(wù)發(fā)展情況可以動(dòng)態(tài)調(diào)整，IBM虛擬技術(shù)發(fā)揮了非常重要的作用。這就是IBM所提倡的動(dòng)態(tài)架構(gòu)，這也是為什么山東移動(dòng)在ROI方面比兄弟省份有如此大的優(yōu)勢之所在。實(shí)際上，山東移動(dòng)的依托于IBM虛擬技術(shù)的動(dòng)態(tài)資源調(diào)整架構(gòu)，是目前概念比較熱的“云計(jì)算”落地的典型案例。

　　最后，是選擇合作伙伴，我覺得IBM的技術(shù)給我們提供了很好的平臺(tái)，沒有好的技術(shù)，可能很多思想就實(shí)現(xiàn)不了。系統(tǒng)架構(gòu)的設(shè)計(jì)以及它的控制，包括對(duì)開發(fā)管理，以及對(duì)架構(gòu)的拆分等等，我覺得這個(gè)方面也是需要我們有一些技術(shù)或者需要一些經(jīng)驗(yàn)來做。這方面有兩方面：一是IBM有很好的技術(shù)給我們提供平臺(tái)，另外一方面我們積累了很好的經(jīng)驗(yàn)，這兩者也是缺一不可的。

　　一切從客戶的角度出發(fā)

　　山東移動(dòng)的容災(zāi)系統(tǒng)的建設(shè)不是一蹴而就的，而是在技術(shù)不斷的摸索中，不斷的進(jìn)步的。從最初的應(yīng)急系統(tǒng)到目前的三中心動(dòng)態(tài)備份系統(tǒng)，山東移動(dòng)在業(yè)務(wù)連續(xù)性方面的建設(shè)歷程也具有廣泛的借鑒意義。

　　崔主任總結(jié)到：“業(yè)務(wù)連續(xù)性是一個(gè)系統(tǒng)工程，不單純只是容災(zāi)的項(xiàng)目，怎么樣保證BOSS系統(tǒng)長時(shí)間穩(wěn)定運(yùn)行，涉及方方面面的事情，實(shí)際上我們?cè)?5年與IBM開展合作的時(shí)候，除容災(zāi)方面的建設(shè)咨詢外，IBM還承擔(dān)我們的機(jī)房設(shè)計(jì)、機(jī)房裝修工作。我們和IBM合作，我覺得最主要的是看到了IBM在這個(gè)行業(yè)內(nèi)的經(jīng)驗(yàn)，對(duì)于我們可以提供一些借鑒意義，少走一些彎路。”

　　對(duì)于容災(zāi)系統(tǒng)來說，除了項(xiàng)目的搭建以外，演練也是非常重要的。山東移動(dòng)對(duì)于災(zāi)備演練也是非常的重視，比如首先進(jìn)行一些桌面演練，一次不行兩次演練。保證在流程方面是暢通的，然后進(jìn)行真實(shí)的演練，在演練中發(fā)現(xiàn)存在的問題，每一次演練都給山東移動(dòng)帶來了很多的收獲。目前，山東移動(dòng)每年都要進(jìn)行災(zāi)備演練。

　　山東移動(dòng)三中心系統(tǒng)的建設(shè)也離不開公司領(lǐng)導(dǎo)的高瞻遠(yuǎn)矚，崔主任這樣說：“作為公司領(lǐng)導(dǎo)層，始終站在客戶角度來考慮，就是要求提供運(yùn)行安全使用方便的BOSS系統(tǒng)，提高客戶滿意度。公司領(lǐng)導(dǎo)在投資、人員等方面給予了大力支持。至于你內(nèi)部采用什么樣的容災(zāi)備份、容災(zāi)機(jī)制等等，那是技術(shù)細(xì)節(jié)方面的事情，是我們建設(shè)維護(hù)部門需要也應(yīng)該做好的，當(dāng)然壓力也很大。”一切從客戶體驗(yàn)出發(fā)，一切為了業(yè)務(wù)連續(xù)性，唯有如此，才是山東移動(dòng)長遠(yuǎn)發(fā)展之道。