2007年底,熊貓電子集團(tuán)選擇EMC Avamar重復(fù)數(shù)據(jù)刪除技術(shù),建成了同行業(yè)中領(lǐng)先的數(shù)據(jù)備份系統(tǒng)。目前,這一技術(shù)已經(jīng)在熊貓電子成功應(yīng)用近一年了。在此介紹我們的應(yīng)用經(jīng)驗(yàn),希望可以給國內(nèi)同行提供有益的啟示。
數(shù)據(jù)對熊貓集團(tuán)的意義
南京熊貓電子集團(tuán)創(chuàng)始于1936年,是一家具有70多年歷史的國有綜合性大型電子信息企業(yè)。1996年,熊貓集團(tuán)控股的南京熊貓電子股份有限公司分別在香港聯(lián)交所和上海證交所上市,成為國內(nèi)電子行業(yè)第一家擁有H股的上市公司。南京熊貓電子集團(tuán)下設(shè)家用電器產(chǎn)業(yè)集團(tuán)、機(jī)電儀產(chǎn)業(yè)集團(tuán)、通信產(chǎn)業(yè)集團(tuán)、信息產(chǎn)業(yè)集團(tuán)、新產(chǎn)業(yè)集團(tuán)、電子制造產(chǎn)業(yè)集團(tuán)等多家子公司,建有4個國家級工程技術(shù)研究中心、3個省級工程技術(shù)研究中心、4個市級工程技術(shù)研究中心、國家第一批博士后工作站。公司主要產(chǎn)品和服務(wù)包括:衛(wèi)星通信設(shè)備、移動通信設(shè)備、短波通信設(shè)備、彩電、個人數(shù)碼娛樂產(chǎn)品、電子制造、儀器儀表、大生產(chǎn)裝備、軟件服務(wù)、系統(tǒng)集成等。公司還參股多家合資企業(yè),包括南京愛立信熊貓通信有限公司、北京索愛普天移動通信有限公司、南京泰雷茲熊貓交通系統(tǒng)有限公司、南京LG熊貓電器有限公司、瀚宇彩欣(南京)科技有限公司等。
南京熊貓電子集團(tuán)對各個子公司實(shí)行集團(tuán)化管理,在集團(tuán)總部部屬了財(cái)務(wù)、Web網(wǎng)站、人力資源、OA、CRM等多套集團(tuán)信息化系統(tǒng),對子公司的業(yè)務(wù)運(yùn)營進(jìn)行集中支持和管控。信息系統(tǒng)對集團(tuán)的正常運(yùn)轉(zhuǎn)非常關(guān)鍵。
信息中心作為信息系統(tǒng)的責(zé)任部門,最擔(dān)心的就是數(shù)據(jù)丟失。系統(tǒng)故障總是可以恢復(fù)的,只不過是時間問題,換一臺設(shè)備、重建系統(tǒng)也相對容易。數(shù)據(jù)丟失的風(fēng)險(xiǎn)則要大得多,信息中心的責(zé)任重大。
集團(tuán)的數(shù)據(jù)量越來越大,對信息系統(tǒng)的依賴性越來越高。為了確保業(yè)務(wù)連續(xù)性和數(shù)據(jù)安全性,2007年底,熊貓集團(tuán)開始建設(shè)新一代的數(shù)據(jù)備份系統(tǒng),目標(biāo)是提高數(shù)據(jù)保護(hù)的級別,實(shí)現(xiàn)更高標(biāo)準(zhǔn)的RTO(恢復(fù)時間目標(biāo))和RPO(恢復(fù)點(diǎn)目標(biāo))。
原有備份方案的挑戰(zhàn)
熊貓電子集團(tuán)需要保護(hù)的核心數(shù)據(jù)較大,主要是數(shù)據(jù)庫數(shù)據(jù)和文件服務(wù)器,未來預(yù)計(jì)有快速的增長。此前的保護(hù)措施是備份至本地磁帶庫,備份策略為周五晚全備份加平時每天的增量備份。
熊貓電子集團(tuán)的信息系統(tǒng)晚上一般不需要處理業(yè)務(wù)。所以每天下班后利用晚上時間備份,雖然一次全備份的時間較長,但備份窗口還夠用。
不過,人無遠(yuǎn)慮,必有近憂。我們主要有兩點(diǎn)擔(dān)心:一是之前的磁帶備份除了恢復(fù)時間長以外,還有一大缺點(diǎn)就是可靠性不夠高。南京地區(qū)梅雨季節(jié)比較長,磁帶受潮容易發(fā)霉。本以為數(shù)據(jù)都已經(jīng)備份到磁帶上,結(jié)果磁帶讀不出數(shù)據(jù),那就麻煩了。二是如前面所說,整個集團(tuán)的數(shù)據(jù)都在這個信息中心。如果遇到火災(zāi)、臺風(fēng)這類影響到整個機(jī)房的災(zāi)害,后果會很嚴(yán)重。所以信息中心決定做一個異地備份,多一道保障。顯然,每天將備份磁帶轉(zhuǎn)運(yùn)到異地保存是不可行的。即使不考慮每天轉(zhuǎn)運(yùn)的人力物力花費(fèi),也會因?yàn)橘M(fèi)事而難以堅(jiān)持。而且,即使堅(jiān)持轉(zhuǎn)運(yùn)了也不是很可靠。
看好重復(fù)數(shù)據(jù)刪除技術(shù)
熊貓電子考慮在相距5公里的地方建一個數(shù)據(jù)容災(zāi)備份系統(tǒng),兩地間連接的是商用IP網(wǎng)絡(luò),其帶寬為2Mb/s。由于帶寬小,可以通過的數(shù)據(jù)量非常有限,因此需要一套先進(jìn)的方案,有效降低對帶寬的要求,同時又能可靠地進(jìn)行備份。
經(jīng)過多方考察,我們發(fā)現(xiàn),重復(fù)數(shù)據(jù)刪除技術(shù)是一個比較理想的方案。備份數(shù)據(jù)的重復(fù)率是非常高的。例如,辦公自動化系統(tǒng)中,文件流轉(zhuǎn)、版本修訂比較普遍,一個文件可能抄送給多個人,一個文件可能有多個版本,這其中有大量的重復(fù)數(shù)據(jù)。尤其是文件比較大的時候,備份時重復(fù)的存儲空間占用相當(dāng)可觀。重復(fù)數(shù)據(jù)刪除技術(shù)就能解決這個問題。所有重復(fù)的數(shù)據(jù),系統(tǒng)在備份時只保留一份,在重復(fù)出現(xiàn)的地方,只保存一個數(shù)據(jù)地址。恢復(fù)數(shù)據(jù)時,數(shù)據(jù)能夠自動還原。這正是熊貓電子需要的技術(shù)。
EMC Avamar是業(yè)界最優(yōu)秀的重復(fù)數(shù)據(jù)刪除技術(shù)之一,它是一種源端的全局重復(fù)數(shù)據(jù)刪除技術(shù)。其特點(diǎn)是,在數(shù)據(jù)源開始處感知應(yīng)用,能夠針對具體應(yīng)用數(shù)據(jù)(例如,Oracle數(shù)據(jù)庫、SQL Server數(shù)據(jù)庫、Word文檔、PPT文檔、電話錄音、流媒體等等)的特點(diǎn),實(shí)現(xiàn)最大限度的重復(fù)數(shù)據(jù)刪除,刪除率高達(dá)300:1甚至更高。例如,公司一個介紹性的PPT文檔,今天張總接待使用,會保存一個署名張總和相應(yīng)日期的版本;明天陳總出訪演示,會保存一個署名陳總和相應(yīng)日期的版本。兩個文件只有一頁不同,其它內(nèi)容都一樣。EMC Avamar能做到,第二次備份時,只保存改過的那一頁。
新型備份方案性能出色
熊貓電子在中心機(jī)房搭建一臺備份服務(wù)器,部署EMC Avamar技術(shù)。備份數(shù)據(jù)經(jīng)過EMC Avamar去除重復(fù)以后,再通過IP網(wǎng)絡(luò)傳輸?shù)饺轂?zāi)備份中心,備份到這里的Avamar Data Store存儲陣列上。在熊貓電子的應(yīng)用環(huán)境上,Avamar的重復(fù)刪除率達(dá)到100:1。由于傳輸?shù)臄?shù)據(jù)量非常小,大大節(jié)省了帶寬,縮短了備份時間,也節(jié)約了備份空間。原來每天要備份好幾小時,現(xiàn)在每天只要幾十分鐘就完成了。綜合比較下來,采用EMC Avamar新一代備份方案,比傳統(tǒng)的備份方式代價(jià)低得多,RTO和RPO卻提高了很多。
Avamar數(shù)據(jù)保護(hù)方案簡化了數(shù)據(jù)恢復(fù)操作。與傳統(tǒng)解決方案不同,Avamar備份每天都是生成的完全備份,而不是傳統(tǒng)備份方式的“全備份+增量備份”,Avamar只需操作一次就可以恢復(fù)所需要的時間點(diǎn)數(shù)據(jù)。Avamar對文件的恢復(fù)很簡單,既可以使用傳統(tǒng)的恢復(fù)操作,也可以通過Web頁面的下載方式進(jìn)行。
由于數(shù)據(jù)是備份到存儲陣列的,存儲陣列上有RAID冗余磁盤技術(shù),可以隨時、自動對數(shù)據(jù)進(jìn)行校驗(yàn),可靠性提高。從數(shù)據(jù)恢復(fù)速度看,磁盤備份比磁帶備份的速度高一個數(shù)量級,數(shù)據(jù)可用性的提高不言而喻。
為了充分利用已有投資,多提供一重?cái)?shù)據(jù)保護(hù),除了用Avamar進(jìn)行異地備份外,熊貓電子將之前的本地磁帶庫備份繼續(xù)保留。
未來的計(jì)劃
EMC Avamar的擴(kuò)展性不錯。將來熊貓電子的其它分支機(jī)構(gòu)或廠區(qū)如果需要備份數(shù)據(jù)時,只要和Avamar的服務(wù)器建立網(wǎng)絡(luò)連接,就可以將數(shù)據(jù)備份至Avamar上。如果需要加強(qiáng)數(shù)據(jù)的保護(hù)級別,可以再增加一個節(jié)點(diǎn),和現(xiàn)有節(jié)點(diǎn)之間做數(shù)據(jù)鏡像。如果未來的數(shù)據(jù)增長非常快,則可增加多個Avamar節(jié)點(diǎn)組成EMC專利的RAIN結(jié)構(gòu),既增加了備份空間,又使數(shù)據(jù)的保護(hù)更加可靠。
我們的經(jīng)驗(yàn)是,對新技術(shù)要既大膽又謹(jǐn)慎。謹(jǐn)慎的是注重投資回報(bào),大膽的是敢吃螃蟹。我們是國內(nèi)較早采用IPS(入侵防御系統(tǒng))技術(shù)的,應(yīng)用效果不錯,熊貓電子的供應(yīng)商都來取經(jīng)。采用重復(fù)數(shù)據(jù)刪除技術(shù)也是國內(nèi)領(lǐng)先的。
下一步,我們的計(jì)劃是,采用VMware虛擬化技術(shù),搭建一臺高配置的服務(wù)器,把各個應(yīng)用服務(wù)器都備份成虛擬機(jī),放在這臺服務(wù)器上。這樣,當(dāng)某個應(yīng)用服務(wù)器出問題時,可以先用虛擬機(jī)工作,并馬上通過虛擬機(jī)恢復(fù)系統(tǒng)。數(shù)據(jù)和系統(tǒng)都有備份,而且可以實(shí)時恢復(fù),進(jìn)一步提高系統(tǒng)的可用性。