國統(tǒng)局CIO：云計(jì)算虛擬化讓實(shí)時(shí)海量數(shù)據(jù)處理無憂

申請免費(fèi)試用、咨詢電話：400-8352-114

“國統(tǒng)局?jǐn)?shù)據(jù)顯示全國70個(gè)大中城市房價(jià)上漲勢頭明顯遏制”、“國統(tǒng)局調(diào)查顯示中國群眾最關(guān)注醫(yī)療問題”、“國統(tǒng)局稱3月份CPI同比漲幅創(chuàng)31個(gè)月以來新高”……
        類似以上的這些消息我們經(jīng)?？梢钥吹剑瑖?strong class="keylink">統(tǒng)計(jì)局源源不斷地向社會公布涉及國家經(jīng)濟(jì)發(fā)展、民生等各個(gè)層面的數(shù)據(jù)。而這些龐大的數(shù)據(jù)處理背后是怎樣的一個(gè) IT系統(tǒng)在支撐？涉及到省市級各個(gè)層面的數(shù)據(jù)是如何匯總到國家統(tǒng)計(jì)局的呢？龐大的數(shù)據(jù)處理對于IT系統(tǒng)會有哪些挑戰(zhàn)？對于種種疑問，國家統(tǒng)計(jì)局?jǐn)?shù)據(jù)管理中 心主任許劍毅向ZDNET至頂網(wǎng)的記者介紹了目前國家統(tǒng)計(jì)局整個(gè)IT系統(tǒng)的建設(shè)思路，同時(shí)國家統(tǒng)計(jì)局?jǐn)?shù)據(jù)管理中心王洪琛處長詳細(xì)介紹了虛擬化和云計(jì)算技術(shù) 在整個(gè)系統(tǒng)中的作用。

國統(tǒng)局核心業(yè)務(wù)系統(tǒng)總體邏輯架構(gòu)

        運(yùn)用云計(jì)算虛擬化直面挑戰(zhàn)
        去年，zdnet至頂網(wǎng)記者在采訪許劍毅時(shí)，他就給記者描述了一副“統(tǒng)計(jì)云”的畫面：國家統(tǒng)計(jì)局正在建整個(gè)統(tǒng)計(jì)數(shù)據(jù)系統(tǒng)的私有云，今后國統(tǒng)局統(tǒng)計(jì)數(shù)據(jù)的采集、加工、處理，都以北京為中樞數(shù)據(jù)中心，再分四個(gè)階層，逐層伸向全國。
        再次見到許劍毅，是在國統(tǒng)局核心業(yè)務(wù)系統(tǒng)項(xiàng)目在進(jìn)行二期之時(shí)，對于“統(tǒng)計(jì)云”的建設(shè)，許劍毅又有了更多的感受和想法。
        經(jīng)過多年的發(fā)展，國統(tǒng)局信息化建設(shè)已經(jīng)取得了很大的成績，然而更多的數(shù)據(jù)處理，尤其在時(shí)效性、準(zhǔn)確性方面要求更多，給國統(tǒng)局的信息化建設(shè)帶來挑戰(zhàn)。“國 統(tǒng)局的應(yīng)用系統(tǒng)非常龐大，其海量數(shù)據(jù)處理量、高并發(fā)量等對于IT系統(tǒng)都會是挑戰(zhàn)。”許劍毅指出，要改變這些情況，硬件設(shè)備能力、性價(jià)比都是所要考慮的。
        “我們的思路是用小機(jī)器代替大機(jī)器的作用，把小的機(jī)器通過集群的方式，集群到核心業(yè)務(wù)系統(tǒng)來滿足業(yè)務(wù)需求。”許劍毅指出這是國統(tǒng)局的一個(gè)思路，與此同時(shí)，建立一個(gè)全國各級統(tǒng)一的系統(tǒng)也是國統(tǒng)局需要解決的，“統(tǒng)計(jì)云”就是按照這樣的需求提出來的。
        許劍毅向zdnet至頂網(wǎng)記者詳細(xì)介紹了目前國統(tǒng)局IT系統(tǒng)的組成情況。“國統(tǒng)局利用現(xiàn)在最先進(jìn)的虛擬化、云計(jì)算、資源池這些先進(jìn)的IT技術(shù)，以國統(tǒng)局 為中心建立國家統(tǒng)一的核心業(yè)務(wù)系統(tǒng)，包括統(tǒng)一的數(shù)據(jù)中心。”許劍毅特別提出了，其系統(tǒng)架構(gòu)里用到的10臺IBM最新的小型機(jī)（包括6臺IBM Powre595服務(wù)器和4臺IBM Power780服務(wù)器）構(gòu)成的集群，“整個(gè)架構(gòu)里利用了IBM等多家公司的最新的產(chǎn)品和技術(shù)，使得整個(gè)系統(tǒng)里沒有單一故障點(diǎn)，從而解決安全問題。”
        與此同時(shí)，國統(tǒng)局的核心業(yè)務(wù)系統(tǒng)還需很好解決高并發(fā)的問題。許劍毅指出，系統(tǒng)整個(gè)設(shè)計(jì)之初是按照百萬級高并發(fā)量設(shè)計(jì)的，“利用虛擬化、云計(jì)算這些技術(shù)百 萬級不會是問題，甚至可以達(dá)到千萬級。”許劍毅認(rèn)為，該套系統(tǒng)也較好的發(fā)揮了IBM小型機(jī)練級處理高并發(fā)的能力，去年的人口普查就很好的檢驗(yàn)了這套系統(tǒng)， “整個(gè)系統(tǒng)的協(xié)調(diào)、運(yùn)算能力非常強(qiáng)。”許劍毅還給了我們一個(gè)數(shù)據(jù)，之前13億多人的表格單機(jī)處于需要一天甚至更多的時(shí)間，而基于新的系統(tǒng)，兩分鐘可以搞 定。
        大統(tǒng)一的思想貫徹國統(tǒng)局整個(gè)信息化建設(shè)的過程中，云的思想也躍然其中。許劍毅說目前國統(tǒng)局正在開發(fā)全國統(tǒng)一的數(shù)據(jù)處理應(yīng)用平臺，而下一步也希望以此為中 心統(tǒng)一業(yè)務(wù)應(yīng)用。“全國統(tǒng)一的業(yè)務(wù)將會集中到一套核心業(yè)務(wù)系統(tǒng)上來處理，為整個(gè)統(tǒng)計(jì)工作提供一個(gè)云服務(wù)。”許劍毅描繪到，國統(tǒng)局的信息化建設(shè)正在一步步邁 向大統(tǒng)一的“統(tǒng)計(jì)云”。
        四個(gè)資源池各司其職 小型機(jī)支撐核心業(yè)務(wù)發(fā)展
        許劍毅向我們描述了國統(tǒng)局整個(gè)IT系統(tǒng)的狀態(tài)，以及其所能發(fā)揮的作用，給我們描繪了一副充滿“誘惑”的統(tǒng)計(jì)云，而這個(gè)系統(tǒng)到底有哪些硬件設(shè)備在支撐，云計(jì)算、虛擬化又是怎樣發(fā)揮著作用呢？王洪琛就從技術(shù)層面向zdnet至頂網(wǎng)的記者做了詳細(xì)介紹。
        私有云的理念對于整個(gè)國統(tǒng)局來說有著很強(qiáng)的吸引力，尤其是立于服務(wù)的云。王洪琛告訴記者，完整的私有云概念實(shí)施起來會有難度，但是依然需要在這個(gè)思想的指導(dǎo)下，去架構(gòu)整個(gè)IT系統(tǒng)。目前國統(tǒng)局在基礎(chǔ)架構(gòu)云層面做了很多工作。
        “隨著業(yè)務(wù)發(fā)展，如果不斷買機(jī)器，承重、電、空間都不夠，在這種情況下虛擬化技術(shù)讓一臺機(jī)器支持更多的應(yīng)用，這是在PC服務(wù)上經(jīng)過幾年的探索已經(jīng)實(shí)現(xiàn) 了，并且效果還是不錯的。”王洪琛指出，這種成功也希望能夠復(fù)制到小型機(jī)上來，“小型機(jī)安全可靠，一直支持著國統(tǒng)局重要的業(yè)務(wù)，然而實(shí)施其虛擬化也會存在 兼容、統(tǒng)一平臺的問題。”IBM的解決方案在王洪琛看來是最能滿足國統(tǒng)局的需求的。
        關(guān)于整個(gè)基礎(chǔ)架構(gòu)的規(guī)劃，資源池的調(diào)用，王洪琛介紹到其一共劃分為四個(gè)資源池，即Web服務(wù)器、應(yīng)用服務(wù)器、數(shù)據(jù)庫以及存儲各屬一個(gè)資源池。四個(gè)資源池 也根據(jù)不同的需求和標(biāo)準(zhǔn)進(jìn)行各自的統(tǒng)一。其中“數(shù)據(jù)庫池是通過IBM的基于小型機(jī)的虛擬化技術(shù)，實(shí)現(xiàn)整個(gè)數(shù)據(jù)庫資源池的調(diào)用。另外通過不同品牌的小型機(jī)或 者PC服務(wù)器組成虛擬化的應(yīng)用服務(wù)器的資源池。”王洪琛也強(qiáng)調(diào)各個(gè)資源池之間的防火墻等安全手段必須做好，確保安全性。
        對于目前業(yè)界說到很多的基于x86的應(yīng)用服務(wù)器，在國統(tǒng)局的IT系統(tǒng)中我們也可以看到。“基礎(chǔ)架構(gòu)云中，數(shù)據(jù)庫云是通過Power來實(shí)現(xiàn)；應(yīng)用服務(wù)器云 一個(gè)通過IBM的應(yīng)用服務(wù)器，以來應(yīng)對大并發(fā)的應(yīng)用，IBM Powre595和IBM Powre780發(fā)揮了很好的作用，Web服務(wù)器云采用的都是刀片式服務(wù)器?；趚86的應(yīng)用服務(wù)器也會支撐一些非關(guān)鍵業(yè)務(wù)的發(fā)展。”王洪琛強(qiáng)調(diào)，無論是 哪種云、基于哪種架構(gòu)的，所有的都是冗余性的，會最大限度保證業(yè)務(wù)的高可用和持續(xù)性。
        完善、穩(wěn)固的基礎(chǔ)架構(gòu)云為整個(gè)統(tǒng)計(jì)云的實(shí)現(xiàn)打定了堅(jiān)實(shí)的基礎(chǔ)。
        第一個(gè)吃“螃蟹”的總是會引起眾多的關(guān)注，伴隨而來的也會有各種各樣的疑問，許劍毅指出IT是為業(yè)務(wù)服務(wù)的，只要新技術(shù)能夠?yàn)闃I(yè)務(wù)發(fā)展帶來實(shí)在的好處就 應(yīng)該去嘗試?；A(chǔ)架構(gòu)云的建立使得統(tǒng)計(jì)局日常管理和運(yùn)維變得簡單、資源分配也會非常靈活。從業(yè)務(wù)層面看，全國統(tǒng)計(jì)系統(tǒng)的融合為所有數(shù)據(jù)能夠?qū)崟r(shí)傳達(dá)、處理 提供了很好的先決條件。這也是許劍毅一直強(qiáng)調(diào)到的大統(tǒng)一，而落到技術(shù)層面，對于IT設(shè)備的性能也有著更多的挑戰(zhàn)，如何處理眾多系統(tǒng)之間的關(guān)系、保障系統(tǒng)的 穩(wěn)定性和資源的高利用，國統(tǒng)局的基礎(chǔ)架構(gòu)云會是一個(gè)很好的借鑒。