數據對熊貓集團的意義
南京(jing)熊(xiong)(xiong)貓(mao)電(dian)子(zi)集(ji)(ji)(ji)團創始(shi)于1936年(nian),是(shi)一家(jia)具有(you)(you)(you)70多年(nian)歷史的(de)國有(you)(you)(you)綜合性大(da)型電(dian)子(zi)信(xin)(xin)(xin)(xin)息(xi)(xi)企(qi)業(ye)(ye)。1996年(nian),熊(xiong)(xiong)貓(mao)集(ji)(ji)(ji)團控(kong)股(gu)的(de)南京(jing)熊(xiong)(xiong)貓(mao)電(dian)子(zi)股(gu)份有(you)(you)(you)限(xian)公(gong)(gong)(gong)司分別在香港聯交所和上海證交所上市(shi),成為國內電(dian)子(zi)行業(ye)(ye)*家(jia)擁有(you)(you)(you)H股(gu)的(de)上市(shi)公(gong)(gong)(gong)司。南京(jing)熊(xiong)(xiong)貓(mao)電(dian)子(zi)集(ji)(ji)(ji)團下設(she)家(jia)用電(dian)器(qi)產(chan)(chan)(chan)業(ye)(ye)集(ji)(ji)(ji)團、機(ji)電(dian)儀產(chan)(chan)(chan)業(ye)(ye)集(ji)(ji)(ji)團、通(tong)信(xin)(xin)(xin)(xin)產(chan)(chan)(chan)業(ye)(ye)集(ji)(ji)(ji)團、信(xin)(xin)(xin)(xin)息(xi)(xi)產(chan)(chan)(chan)業(ye)(ye)集(ji)(ji)(ji)團、新(xin)產(chan)(chan)(chan)業(ye)(ye)集(ji)(ji)(ji)團、電(dian)子(zi)制造(zao)產(chan)(chan)(chan)業(ye)(ye)集(ji)(ji)(ji)團等多家(jia)子(zi)公(gong)(gong)(gong)司,建有(you)(you)(you)4個*工(gong)(gong)程技術(shu)(shu)研究(jiu)中(zhong)心(xin)、3個省級工(gong)(gong)程技術(shu)(shu)研究(jiu)中(zhong)心(xin)、4個市(shi)級工(gong)(gong)程技術(shu)(shu)研究(jiu)中(zhong)心(xin)、國家(jia)*批(pi)博士(shi)后(hou)工(gong)(gong)作站。公(gong)(gong)(gong)司主要(yao)產(chan)(chan)(chan)品和服(fu)務(wu)包括:衛星通(tong)信(xin)(xin)(xin)(xin)設(she)備(bei)、移動(dong)通(tong)信(xin)(xin)(xin)(xin)設(she)備(bei)、短波通(tong)信(xin)(xin)(xin)(xin)設(she)備(bei)、彩(cai)電(dian)、個人數碼娛(yu)樂產(chan)(chan)(chan)品、電(dian)子(zi)制造(zao)、儀器(qi)儀表、大(da)生產(chan)(chan)(chan)裝備(bei)、軟件服(fu)務(wu)、系(xi)統集(ji)(ji)(ji)成等。公(gong)(gong)(gong)司還參(can)股(gu)多家(jia)合資企(qi)業(ye)(ye),包括南京(jing)愛(ai)立(li)信(xin)(xin)(xin)(xin)熊(xiong)(xiong)貓(mao)通(tong)信(xin)(xin)(xin)(xin)有(you)(you)(you)限(xian)公(gong)(gong)(gong)司、北(bei)京(jing)索愛(ai)普天移動(dong)通(tong)信(xin)(xin)(xin)(xin)有(you)(you)(you)限(xian)公(gong)(gong)(gong)司、南京(jing)泰雷茲熊(xiong)(xiong)貓(mao)交通(tong)系(xi)統有(you)(you)(you)限(xian)公(gong)(gong)(gong)司、南京(jing)LG熊(xiong)(xiong)貓(mao)電(dian)器(qi)有(you)(you)(you)限(xian)公(gong)(gong)(gong)司、瀚宇彩(cai)欣(南京(jing))科(ke)技有(you)(you)(you)限(xian)公(gong)(gong)(gong)司等。
南京(jing)熊貓電子(zi)集(ji)(ji)團對各個子(zi)公(gong)司實行集(ji)(ji)團化(hua)管理,在集(ji)(ji)團總部部屬了財務、Web、人(ren)力(li)資(zi)源、OA、CRM等多套集(ji)(ji)團信息(xi)化(hua)系(xi)統,對子(zi)公(gong)司的業(ye)務運(yun)營進行集(ji)(ji)中支持和管控。信息(xi)系(xi)統對集(ji)(ji)團的正常運(yun)轉非常關(guan)鍵。
信(xin)(xin)息中心(xin)作為信(xin)(xin)息系統(tong)的(de)責任(ren)(ren)部門(men),zui擔心(xin)的(de)就(jiu)是數據丟失(shi)。系統(tong)故障總是可以恢復的(de),只(zhi)不過(guo)是時間問題,換一臺設(she)備、重(zhong)建系統(tong)也相(xiang)對容易。數據丟失(shi)的(de)風(feng)險則要(yao)大(da)得多,信(xin)(xin)息中心(xin)的(de)責任(ren)(ren)重(zhong)大(da)。
集(ji)團的(de)(de)數據量(liang)越來越大,對(dui)信息系統的(de)(de)依(yi)賴性(xing)(xing)越來越高。為了確保(bao)業務連續(xu)性(xing)(xing)和(he)數據安全性(xing)(xing),2007年底,熊(xiong)貓集(ji)團開始建設新(xin)一代的(de)(de)數據備份(fen)系統,目標是提高數據保(bao)護的(de)(de)級(ji)別,實(shi)現更高標準的(de)(de)RTO(恢(hui)復時間目標)和(he)RPO(恢(hui)復點目標)。
原有備份方案的挑戰
熊貓電子集(ji)團(tuan)需要保護的(de)核心數據較大,主要是(shi)數據庫(ku)數據和文(wen)件服務器,未來預計(ji)有快速(su)的(de)增(zeng)長。此前的(de)保護措(cuo)施是(shi)備份(fen)(fen)至本地(di)磁帶庫(ku),備份(fen)(fen)策略為周五晚全備份(fen)(fen)加平時(shi)每天的(de)增(zeng)量備份(fen)(fen)。
熊貓電(dian)子集團的信息系統(tong)晚(wan)上一般(ban)不(bu)需要處理業(ye)務。所以每天下班(ban)后(hou)利用晚(wan)上時間備份(fen),雖然一次全備份(fen)的時間較長,但備份(fen)窗口還夠用。
不(bu)過,人(ren)無遠(yuan)慮,必有(you)近憂。我們主要有(you)兩(liang)點(dian)擔(dan)心:一(yi)(yi)是之前的磁(ci)(ci)(ci)(ci)帶(dai)(dai)備(bei)(bei)(bei)份除了(le)恢復時間長(chang)以外,還有(you)一(yi)(yi)大(da)缺點(dian)就是可(ke)(ke)靠(kao)性不(bu)夠高。南(nan)京地(di)(di)區梅雨季節比較長(chang),磁(ci)(ci)(ci)(ci)帶(dai)(dai)受潮(chao)容(rong)易(yi)發霉(mei)。本以為數(shu)據(ju)都已經備(bei)(bei)(bei)份到(dao)磁(ci)(ci)(ci)(ci)帶(dai)(dai)上(shang),結果磁(ci)(ci)(ci)(ci)帶(dai)(dai)讀不(bu)出數(shu)據(ju),那(nei)就麻煩了(le)。二(er)是如前面所說,整(zheng)個(ge)(ge)集團(tuan)的數(shu)據(ju)都在這個(ge)(ge)信息(xi)中心。如果遇到(dao)火災(zai)、臺風這類(lei)影響到(dao)整(zheng)個(ge)(ge)機房的災(zai)害,后果會(hui)很嚴(yan)重。所以信息(xi)中心決定(ding)做(zuo)一(yi)(yi)個(ge)(ge)異(yi)地(di)(di)備(bei)(bei)(bei)份,多一(yi)(yi)道(dao)保(bao)障。顯(xian)然(ran),每天將(jiang)備(bei)(bei)(bei)份磁(ci)(ci)(ci)(ci)帶(dai)(dai)轉運(yun)到(dao)異(yi)地(di)(di)保(bao)存是不(bu)可(ke)(ke)行的。即使不(bu)考慮每天轉運(yun)的人(ren)力物力花費,也(ye)會(hui)因(yin)為費事而(er)難以堅(jian)持。而(er)且,即使堅(jian)持轉運(yun)了(le)也(ye)不(bu)是很可(ke)(ke)靠(kao)。
看好重復數據刪除技術
熊貓電子考慮在相距5公里的地(di)方(fang)建(jian)一個數(shu)據容災備份系(xi)統(tong),兩地(di)間(jian)連接(jie)的是(shi)商用(yong)IP網絡,其(qi)帶寬為2Mb/s。由于(yu)帶寬小(xiao),可以(yi)通過的數(shu)據量非常有限,因此(ci)需(xu)要一套先(xian)進的方(fang)案,有效降低對帶寬的要求,同時又能可靠(kao)地(di)進行備份。
經過(guo)多(duo)(duo)(duo)方(fang)考察,我們發現(xian),重(zhong)復(fu)(fu)數(shu)(shu)據(ju)刪(shan)除(chu)技術(shu)是(shi)一(yi)(yi)個(ge)比較(jiao)理想的(de)方(fang)案。備份數(shu)(shu)據(ju)的(de)重(zhong)復(fu)(fu)率是(shi)非常高的(de)。例(li)如,辦公自(zi)動(dong)化系統中(zhong),文(wen)(wen)件(jian)(jian)流轉、版本(ben)修(xiu)訂比較(jiao)普遍,一(yi)(yi)個(ge)文(wen)(wen)件(jian)(jian)可能(neng)抄送給多(duo)(duo)(duo)個(ge)人(ren),一(yi)(yi)個(ge)文(wen)(wen)件(jian)(jian)可能(neng)有(you)多(duo)(duo)(duo)個(ge)版本(ben),這(zhe)其中(zhong)有(you)大量(liang)的(de)重(zhong)復(fu)(fu)數(shu)(shu)據(ju)。尤其是(shi)文(wen)(wen)件(jian)(jian)比較(jiao)大的(de)時(shi)(shi)候,備份時(shi)(shi)重(zhong)復(fu)(fu)的(de)存儲(chu)空間占用相當可觀。重(zhong)復(fu)(fu)數(shu)(shu)據(ju)刪(shan)除(chu)技術(shu)就能(neng)解決這(zhe)個(ge)問題。所有(you)重(zhong)復(fu)(fu)的(de)數(shu)(shu)據(ju),系統在備份時(shi)(shi)只(zhi)保(bao)留一(yi)(yi)份,在重(zhong)復(fu)(fu)出現(xian)的(de)地方(fang),只(zhi)保(bao)存一(yi)(yi)個(ge)數(shu)(shu)據(ju)地址。恢復(fu)(fu)數(shu)(shu)據(ju)時(shi)(shi),數(shu)(shu)據(ju)能(neng)夠自(zi)動(dong)還(huan)原。這(zhe)正(zheng)是(shi)熊貓(mao)電子需要(yao)的(de)技術(shu)。
EMC Avamar是業(ye)界zui的(de)(de)重復數(shu)(shu)據(ju)(ju)(ju)(ju)刪(shan)除技術之一(yi)(yi)(yi),它(ta)(ta)是一(yi)(yi)(yi)種源端的(de)(de)全局重復數(shu)(shu)據(ju)(ju)(ju)(ju)刪(shan)除技術。其(qi)特(te)點是,在數(shu)(shu)據(ju)(ju)(ju)(ju)源開始(shi)處感(gan)知應(ying)(ying)用(yong)(yong),能(neng)夠針對(dui)具體應(ying)(ying)用(yong)(yong)數(shu)(shu)據(ju)(ju)(ju)(ju)(例(li)如,Oracle數(shu)(shu)據(ju)(ju)(ju)(ju)庫、SQL Server數(shu)(shu)據(ju)(ju)(ju)(ju)庫、Word文(wen)檔、PPT文(wen)檔、錄音(yin)、流媒體等等)的(de)(de)特(te)點,實現zui大限度的(de)(de)重復數(shu)(shu)據(ju)(ju)(ju)(ju)刪(shan)除,刪(shan)除率(lv)高達300:1甚(shen)至更高。例(li)如,公司一(yi)(yi)(yi)個(ge)介紹性的(de)(de)PPT文(wen)檔,今天(tian)張總接待(dai)使用(yong)(yong),會保(bao)(bao)存(cun)一(yi)(yi)(yi)個(ge)署(shu)名張總和(he)相應(ying)(ying)日期(qi)的(de)(de)版(ban)本;明天(tian)陳總出訪演示,會保(bao)(bao)存(cun)一(yi)(yi)(yi)個(ge)署(shu)名陳總和(he)相應(ying)(ying)日期(qi)的(de)(de)版(ban)本。兩(liang)個(ge)文(wen)件只有一(yi)(yi)(yi)頁不同(tong),其(qi)它(ta)(ta)內(nei)容都(dou)一(yi)(yi)(yi)樣(yang)。EMC Avamar能(neng)做到,第二次備份時,只保(bao)(bao)存(cun)改過的(de)(de)那一(yi)(yi)(yi)頁。
新型備份方案性能出色
熊(xiong)貓(mao)電子(zi)在中(zhong)心機房搭建一(yi)臺備(bei)(bei)(bei)份(fen)(fen)服(fu)務器(qi),部署EMC Avamar技(ji)術(shu)。備(bei)(bei)(bei)份(fen)(fen)數據經過(guo)EMC Avamar去除重(zhong)復以后,再通過(guo)IP網絡傳輸到(dao)容(rong)災(zai)備(bei)(bei)(bei)份(fen)(fen)中(zhong)心,備(bei)(bei)(bei)份(fen)(fen)到(dao)這里的(de)Avamar Data Store存儲陣列上(shang)。在熊(xiong)貓(mao)電子(zi)的(de)應用(yong)環境上(shang),Avamar的(de)重(zhong)復刪除率(lv)達到(dao)100:1。由于傳輸的(de)數據量(liang)非常(chang)小(xiao),大大節省了(le)帶寬,縮短了(le)備(bei)(bei)(bei)份(fen)(fen)時間(jian),也節約了(le)備(bei)(bei)(bei)份(fen)(fen)空間(jian)。原來每(mei)天(tian)要(yao)(yao)備(bei)(bei)(bei)份(fen)(fen)好幾(ji)小(xiao)時,現(xian)在每(mei)天(tian)只要(yao)(yao)幾(ji)十分鐘就完成(cheng)了(le)。綜合(he)比較下(xia)來,采用(yong)EMC Avamar新一(yi)代(dai)備(bei)(bei)(bei)份(fen)(fen)方案,比傳統的(de)備(bei)(bei)(bei)份(fen)(fen)方式代(dai)價低得多(duo),RTO和RPO卻提高(gao)了(le)很多(duo)。
Avamar數(shu)據保(bao)護方案(an)簡化了數(shu)據恢(hui)復操(cao)作。與(yu)傳(chuan)統(tong)解決方案(an)不(bu)同,Avamar備(bei)份(fen)每(mei)天都是生成的*備(bei)份(fen),而不(bu)是傳(chuan)統(tong)備(bei)份(fen)方式的“全(quan)備(bei)份(fen)+增量備(bei)份(fen)",Avamar只需操(cao)作一(yi)次(ci)就可以(yi)(yi)恢(hui)復所需要的時間點數(shu)據。Avamar對文件的恢(hui)復很簡單,既可以(yi)(yi)使用傳(chuan)統(tong)的恢(hui)復操(cao)作,也可以(yi)(yi)通(tong)過Web頁面的下(xia)載方式進行。
由于(yu)數據是(shi)備(bei)份到存(cun)(cun)儲(chu)(chu)陣列的,存(cun)(cun)儲(chu)(chu)陣列上有(you)RAID冗余(yu)磁盤技(ji)術(shu),可(ke)以(yi)隨時、自動對數據進(jin)行校驗,可(ke)靠性(xing)提高。從數據恢復速(su)度看,磁盤備(bei)份比磁帶備(bei)份的速(su)度高一個數量級,數據可(ke)用性(xing)的提高不(bu)言而(er)喻(yu)。
為了充分利用(yong)已有投資(zi),多提供一重數(shu)據保護,除(chu)了用(yong)Avamar進行異地備(bei)份外,熊貓電子將之(zhi)前的(de)本地磁帶庫(ku)備(bei)份繼續保留。
未來的計劃
EMC Avamar的(de)(de)(de)擴展性不錯。將來熊貓(mao)電(dian)子的(de)(de)(de)其它分(fen)支(zhi)機構(gou)或廠(chang)區如果需要備份數(shu)(shu)據時(shi),只要和(he)(he)Avamar的(de)(de)(de)服務器建立網絡(luo)連(lian)接,就可以將數(shu)(shu)據備份至Avamar上。如果需要加強數(shu)(shu)據的(de)(de)(de)保(bao)護(hu)(hu)級別(bie),可以再增加一個節點(dian),和(he)(he)現有節點(dian)之間做數(shu)(shu)據鏡像(xiang)。如果未來的(de)(de)(de)數(shu)(shu)據增長非常快,則(ze)可增加多(duo)個Avamar節點(dian)組成(cheng)EMC的(de)(de)(de)RAIN結構(gou),既增加了備份空間,又使(shi)數(shu)(shu)據的(de)(de)(de)保(bao)護(hu)(hu)更加可靠。
我們的(de)經驗是(shi),對新技(ji)術(shu)(shu)(shu)要既大(da)膽又謹(jin)慎(shen)。謹(jin)慎(shen)的(de)是(shi)注重,大(da)膽的(de)是(shi)敢(gan)吃螃(pang)蟹。我們是(shi)國內較早采用IPS(入侵防御系(xi)統)技(ji)術(shu)(shu)(shu)的(de),應用效果不錯,熊貓電(dian)子的(de)供(gong)應商(shang)都來(lai)取經。采用重復(fu)數(shu)據刪除技(ji)術(shu)(shu)(shu)也是(shi)國內的(de)。
下一步,我們(men)的計劃是,采用(yong)VMware虛(xu)擬(ni)化技術,搭建一臺高配置的服(fu)務(wu)器,把各(ge)個(ge)應用(yong)服(fu)務(wu)器都(dou)備(bei)份成虛(xu)擬(ni)機(ji),放在(zai)這臺服(fu)務(wu)器上。這樣(yang),當某個(ge)應用(yong)服(fu)務(wu)器出問題時,可以先用(yong)虛(xu)擬(ni)機(ji)工(gong)作,并馬上通過虛(xu)擬(ni)機(ji)恢復(fu)(fu)系統(tong)。數據(ju)和系統(tong)都(dou)有備(bei)份,而(er)且(qie)可以實(shi)時恢復(fu)(fu),進一步提(ti)高系統(tong)的可用(yong)性。