前不久的一個存儲論壇上，記者現(xiàn)場聆聽了上海交通大學網(wǎng)絡(luò)信息中心系統(tǒng)架構(gòu)師黃保青關(guān)于構(gòu)建云存儲平臺的經(jīng)驗分享，深入且全面地了解到在實施部署過程中如何解決存儲、網(wǎng)絡(luò)和虛擬化方面的難題，以及如何與開源OpenStack結(jié)合起來提供服務(wù)的應(yīng)用實踐。

　　據(jù)黃保青介紹，上海交通大學數(shù)據(jù)中心在閔行和徐匯校區(qū)建設(shè)有主備兩個機房，距離超過30千米，通過校園萬兆網(wǎng)絡(luò)實現(xiàn)互連。現(xiàn)階段共部署了100多臺服務(wù)器，虛擬化程度達到60%。

　　上海交通大學在采用虛擬化技術(shù)方面起步較早，從2004年開始計劃簡化大型機的功能，再到初步實施服務(wù)器虛擬化，至今已經(jīng)采用了VMware、KVM和OpenVZ等技術(shù)。目前數(shù)據(jù)庫以外的應(yīng)用基本都運行在虛擬機中。由于考慮到數(shù)據(jù)庫的IO比較密集，并且本身應(yīng)用相對單一，所以沒有將數(shù)據(jù)庫放在虛擬機里面。

　　現(xiàn)在，上海交通大學現(xiàn)在已經(jīng)可以為師生提供云服務(wù)，包括與廠商合作的云存儲，為教師和學生提供20GB和10GB的存儲空間，類似網(wǎng)盤的服務(wù)和文件共享服務(wù)，總?cè)萘窟_到30TB以上，“但這并不是架構(gòu)在傳統(tǒng)存儲系統(tǒng)上，而是通過類似Google GFS的廉價存儲系統(tǒng)實現(xiàn)的”。

　　此外，上海交大還籌備著提供基于OpenStack的IaaS服務(wù)，目前還處于測試階段。談到使用OpenStack的原因時，黃保青解釋說，上海交大和很多廠商都有合作關(guān)系，但一直希望在數(shù)據(jù)中心建設(shè)方面擁有自己的一些東西，所以決定在OpenStack上提供IaaS服務(wù)。而在PaaS服務(wù)方面，上海交通大學利用VMware CloudFoundry提供一些應(yīng)用級別的服務(wù)。

　　據(jù)了解，上海交通大學目前采用了NetApp、HDS和Sun StorageTek等傳統(tǒng)存儲系統(tǒng)，如何繼續(xù)保留和使用這些系統(tǒng)，最大限度地保護已有投資，同時積極引入嘗試DCB和FCoE等新技術(shù)，是上海交通大學遇到的首要挑戰(zhàn)。在這種情況下，黃保青的小組還考慮到了在DCB上實現(xiàn)存儲網(wǎng)絡(luò)和數(shù)據(jù)網(wǎng)絡(luò)的“兩網(wǎng)融合”，簡化數(shù)據(jù)中心網(wǎng)絡(luò)架構(gòu)，構(gòu)建一個完善的跨校園多數(shù)據(jù)中心災(zāi)備系統(tǒng)。

　　日漸膨脹的數(shù)據(jù)存儲對于上海交大來說也是一個令人頭疼的問題。數(shù)據(jù)庫、虛擬化平臺、富媒體資源和電子圖書，這些資源占用大量存儲空間，僅上海交通大學的圖書館每年數(shù)據(jù)增長量就能達到幾十個TB。同時，由于學校個IT部門之間相對比較獨立，因此對于多租戶也提出了一定的需求，既要給部門、學生和科研提供存儲服務(wù)，又要做到互不干擾。

　　在了解到可能面對的挑戰(zhàn)和明確需求之后，接下來就是規(guī)劃如何建設(shè)校園云存儲環(huán)境了，是采用開源還是商業(yè)方案？如何讓架構(gòu)做到橫向擴展？黃保青介紹說，最初在存儲選型的時候，他們希望支持統(tǒng)一存儲系統(tǒng)，除了SAN之外IP存儲是簡化數(shù)據(jù)中心架構(gòu)一個很好的選擇。此外，同時支持多個存儲協(xié)議也是構(gòu)建云存儲平臺的完備基礎(chǔ)。

　　在他看來，F(xiàn)CoE是未來數(shù)據(jù)中心發(fā)展的方向，可以節(jié)省很多在FC上的投資并減少所需的管理人員，所以需要存儲系統(tǒng)能夠支持原生 FCoE。同時利用存儲分層技術(shù)，自動實現(xiàn)對熱點數(shù)據(jù)的智能化分層；支持定制化的云計算環(huán)境和開源OpenStack等；架構(gòu)的靈活擴展也是他非�？粗氐�，既要能滿足后續(xù)成長的需求，又要支持跨校園網(wǎng)在徐匯和閔行校區(qū)間的數(shù)據(jù)容災(zāi)。

　　在圍繞上面幾個關(guān)注點做了一系列長期調(diào)研之后，上海交大做了一套數(shù)據(jù)中心規(guī)劃，在閔行總數(shù)據(jù)中心劃分成四個區(qū)域，（如下圖）前三個區(qū)域都是傳統(tǒng)的校園網(wǎng)絡(luò)應(yīng)用，按照Web層、應(yīng)用層和數(shù)據(jù)庫層劃分，其中數(shù)據(jù)庫層上部署了FCoE交換機。云服務(wù)被單獨劃分成一個區(qū)域，因為現(xiàn)在很多新的數(shù)據(jù)中心應(yīng)用都跑在這個層上，包括數(shù)據(jù)分析、創(chuàng)新應(yīng)用和體驗展示等。

　　在數(shù)據(jù)和存儲網(wǎng)絡(luò)的融合方面，上海交通大學數(shù)據(jù)庫服務(wù)器區(qū)的思科Nexus 5550啟用FCoE功能，部分接口配置8G FC SFP模塊，Web和應(yīng)用服務(wù)器區(qū)的服務(wù)器主要通過IP協(xié)議訪問存儲，SAN存儲系統(tǒng)則選擇了支持FCoE的NetApp FAS3270AE系統(tǒng)，因為NetApp FAS和服務(wù)器的萬兆網(wǎng)卡接入Nexus交換機的萬兆接口，在同一萬兆端口上可以同時支持FCoE、iSCSI和NAS協(xié)議。

　　據(jù)黃保青介紹，NetApp FAS的FC接口接入現(xiàn)有FC交換機，為原有的FC SAN提供存儲空間�？紤]到各廠商的FC交換機具有極強的排它性，所以沒有將原有的FC交換機與Nexus 5500互連。隨著時間的推移，F(xiàn)C SAN設(shè)備將自然淘汰，數(shù)據(jù)中心將過渡到純FCoE存儲。

　　而且，新環(huán)境中常用的一些操作系統(tǒng)基本上都可以支持FCoE，例如現(xiàn)在使用的Windows Server 2008 R2、Linux CentOS 6.1以上版本和VMware vSphere 5.1 Software FCoE Adapter，所以在他看來，“FCoE的入門門檻已經(jīng)降到很低了”。

　　黃保青表示，他們下一步的計劃是支持SAN和NAS的統(tǒng)一集群存儲，不僅如此，存儲控制器、光纖和網(wǎng)絡(luò)接口、存儲數(shù)據(jù)卷全部虛擬化，萬兆內(nèi)部網(wǎng)絡(luò)做到數(shù)據(jù)的無縫遷移，讓徐匯校區(qū)和閔行校區(qū)之間通過IP校園網(wǎng)實現(xiàn)數(shù)據(jù)集群化架構(gòu)和容災(zāi)，最終目標是“構(gòu)建安全多租戶的云存儲”。

　　作為國內(nèi)開源云聯(lián)盟的發(fā)起單位之一，去年8月上海交通大學與英特爾、新浪和中標共同成立開源云聯(lián)盟，當時學�；�于OpenStack的平臺有50多臺高端服務(wù)器，100TB iSCSI存儲、400TB對象存儲以及全萬兆以太網(wǎng)互連，計劃在2013年上半年正式對外試運行，“我們將把這套平臺運用于生產(chǎn)環(huán)境中，與云存儲應(yīng)用結(jié)合起來，給全校師生提供IaaS等服務(wù)”。