在上一篇札記中，我們已經(jīng)介紹了IBM FlashSystem 840，以及參與此次測試的小伙伴——Dell PowerEdge R730XD和博科的支持2、4、8、10以及16Gb/s的6510光纖交換機(jī)。并將這些設(shè)備通過15組光纖線連接。物理上已經(jīng)連通，可以開始測試了。
但在正式測試之前，我們還需要進(jìn)行一些驗(yàn)證性測試。所謂的驗(yàn)證性測試就是通過一些簡單的測試工具來檢驗(yàn)整個(gè)測試平臺(tái)是否正常運(yùn)行，并且是否能夠讓每臺(tái)設(shè)備都能發(fā)揮其應(yīng)有性能。
驗(yàn)證性測試的結(jié)果雖然不會(huì)被納入最終的結(jié)果，但是這一環(huán)節(jié)卻非常作用。在這一環(huán)節(jié)，我們使用一臺(tái)Dell PowerEdge T630服務(wù)器作為計(jì)算端，通過一塊Emulex公司的8Gb/s FC適配卡與博科的6510光纖交換機(jī)相連，然后連接到FlashSystem 840的主機(jī)接口。
出于操作簡單且結(jié)果實(shí)時(shí)直觀可見的考慮，在T630服務(wù)器上，使用Windows Server 2012 R2平臺(tái)，測試工具選用為人所熟知的IOmeter。
從FlashSystem 840上劃分出一個(gè)容量為2TB的邏輯卷，掛載到T630之上，然后使用IOmeter進(jìn)行測試，測試數(shù)據(jù)塊大小為4KB，測試方式為百分之百隨機(jī)讀。運(yùn)行一段時(shí)間后，F(xiàn)lashSystem 840的IOPS穩(wěn)定在14萬IOPS左右，帶寬接近600 MB/s，如下圖所示：
在4KB隨機(jī)數(shù)據(jù)讀測試中，其性能表現(xiàn)超過14萬IOps，帶寬在550MiB左右
對于磁盤系統(tǒng)而言，14萬IOPS已經(jīng)很高了，何況只是在一個(gè)2U機(jī)箱內(nèi)。但對于以追求性能為目標(biāo)的全閃存陣列而言，明顯未能發(fā)揮其全部優(yōu)勢。尤其距離FlashSystem 840所宣稱的110萬IOPS相距甚遠(yuǎn)。
問題出在哪兒呢？難道是單個(gè)邏輯核所提供的計(jì)算能力不夠？
剛剛在使用IOmeter進(jìn)行驗(yàn)證時(shí)，我們只是用了一個(gè)“worker”，現(xiàn)在使用8個(gè)worker同時(shí)進(jìn)行測試。但是，所獲得性能指數(shù)幾乎沒有變化，看來計(jì)算能力不是瓶頸。而IBM FlashSystem 840的性能瓶頸也遠(yuǎn)遠(yuǎn)未到，那么就只剩下網(wǎng)絡(luò)方面的問題了。
剛剛使用的是隨機(jī)4KB數(shù)據(jù)塊，現(xiàn)在我們使用連續(xù)的4KB數(shù)據(jù)塊來驗(yàn)證，是否存在網(wǎng)絡(luò)帶寬瓶頸。測試結(jié)果如下圖顯示：
在4KB連續(xù)數(shù)據(jù)讀測試中，獲得了與4KB隨機(jī)讀測試幾乎一樣的成績——14萬IOps，隨機(jī)讀與連續(xù)讀性能一致，這在磁盤系統(tǒng)幾乎是不可想象的。同時(shí)其帶寬也保持在550MiB左右。通過這兩次測試，我們初步判斷是帶寬不夠?qū)е铝薋lashSystem 840的性能發(fā)揮。下面我們將進(jìn)行進(jìn)一步確認(rèn)。
我們繼續(xù)使用IOmeter進(jìn)行驗(yàn)證，但這次使用64KB大小的數(shù)據(jù)塊進(jìn)行連續(xù)讀測試。獲得的性能表現(xiàn)如下圖所示：
在使用64KB數(shù)據(jù)連續(xù)讀測試中，IOps超過1.2萬，最為重要的是，其帶寬達(dá)到了785MiB。就8Gb/s FC的性能而言，其幾乎已經(jīng)達(dá)到了8Gb/s的理論速度（800MiB/s），由這點(diǎn)可以確定，這一驗(yàn)證性測試環(huán)節(jié)的瓶頸在與帶寬。
提高帶寬通常有兩種方法。第一種就是實(shí)用帶寬更高的光纖適配卡，比如將Emulex的8Gb/s FC適配卡換為帶寬更高的16Gb/s FC適配卡。當(dāng)然這需要FlashSystem 840和博科FC交換機(jī)都支持16Gb/s FC。上一篇札記已經(jīng)提到，F(xiàn)lashSystem 840是對16Gb/s FC提供支持的；在博科的官網(wǎng)上，我們也查到，這款6510光纖交換機(jī)也是支持16Gb/s FC的。但是我們希望從Emulex公司借到的16Gb/s FC適配卡卻遲遲未能到位，所以第一種方法暫時(shí)不可行。
第二種方法就是為T630服務(wù)器再添加幾張8Gb/s FC適配器，正好我們實(shí)驗(yàn)室共有三張8Gb/s 光纖HBA卡，可以全用在T630之中。但這里面還需要進(jìn)行設(shè)置。因?yàn)�，將多張光纖HBA卡在同一個(gè)服務(wù)器中使用，其仍是單獨(dú)的網(wǎng)卡，需要將這多張適配卡在邏輯上被視為一張HBA卡。這就需要用到MPIO軟件，即多路徑IO軟件。
在Windows Server 2012 R2平臺(tái)下，其自帶有MPIO插件，通過服務(wù)器管理器可直接安裝。安裝好之后，對MPIO進(jìn)行設(shè)置，如下圖所示：
在安裝了多路徑IO插件之后，就可以在磁盤管理界面為測試卷配置MPIO設(shè)置。如圖，我們將策略設(shè)置為“協(xié)商會(huì)議”。
盡管安裝了MPIO，但我們在同時(shí)使用3張8Gb/s光纖HBA卡時(shí)，仍遇到一些限制，比如三張HBA卡總共6個(gè)端口，但在這之中，我們卻只能同時(shí)使用3個(gè)端口，另外3個(gè)端口不能使用。如果要解決這個(gè)問題，需要在進(jìn)入博科6510光纖交換機(jī)管理界面創(chuàng)建相應(yīng)的Zone。
但此時(shí)，我們是為了驗(yàn)證是否因?yàn)閹拞栴}限制了FlashSystem 840的性能發(fā)揮，所以劃分Zone這一工作可以留到以后解決。
再次使用IOmeter工具，使用4KB數(shù)據(jù)塊對FlashSystem 840進(jìn)行隨機(jī)讀測試，盡管只有三個(gè)端口，但FlashSystem 840的性能表現(xiàn)明顯提升，如下圖所示：
如上圖所示，在使用三個(gè)8Gb/s FC端口，并設(shè)置多路徑IO的情況下，使用4KB隨機(jī)讀進(jìn)行測試，F(xiàn)lashSystem 840能夠提供近50萬的IOPS，且?guī)掃_(dá)到2GB/s，如果采用基于磁盤的存儲(chǔ)系統(tǒng)，這幾乎是不可想象的。
盡管此驗(yàn)證過程并沒有發(fā)揮出FlashSystem 840最極限的IOPS性能，但在使用3個(gè)8Gb/s FC端口的情況下，能夠獲得近50W的IOPS，已經(jīng)很難得，如果能將6個(gè)端口全部使用，相信應(yīng)該能夠最大限度發(fā)揮FlashSystem 840的性能優(yōu)勢。在這之中，服務(wù)器、光纖HBA卡和FlashSystem 840都發(fā)揮了各自的作用。
此次驗(yàn)證環(huán)節(jié)所采用的Dell PowerEdge T630雖然只是一個(gè)塔式服務(wù)器，但其配備了雙路CPU，盡管CPU配備的是Intel公司最新E5 v3系列中的中端產(chǎn)品——E5 2660，每CPU內(nèi)10個(gè)物理核，開啟超線程，共計(jì)40個(gè)邏輯核，提供了充足的計(jì)算性能。
其次，Emulex公司的8Gb/s光纖HBA卡也相當(dāng)給力，盡管最新的16Gb/s光纖HBA沒能到位，但多個(gè)光纖HBA卡通過MPIO提供了充足的帶寬。
最后當(dāng)然是IBM FlashSystem 840全閃存陣列提供了強(qiáng)大的存儲(chǔ)性能，尤其是4KB隨機(jī)讀測試中，盡管驗(yàn)證環(huán)節(jié)使用的是基準(zhǔn)測試工具，并不能全部代表實(shí)際環(huán)境中的性能成績，但其表現(xiàn)值得期待。
IBM FlashSystem 840在真實(shí)環(huán)境下的性能表現(xiàn)又是怎樣的呢？請關(guān)注我們稍后的正式測試。同時(shí)，我們還將邀請兩家知名互聯(lián)網(wǎng)公司的工程師來進(jìn)行實(shí)際環(huán)境模擬測試，他們又將如何測試FlashSystem 840呢？我們稍后再敘。
