omniture

云計(jì)算如何測(cè)“benchmark”?

2016-10-17 16:03

筆記本、服務(wù)器甚至是手機(jī),只要有新的產(chǎn)品發(fā)布,就會(huì)伴隨著一個(gè)又一個(gè)的基準(zhǔn)測(cè)試性能指標(biāo)對(duì)比。Benchmark(基準(zhǔn)測(cè)試)這個(gè)英文單詞也已經(jīng)被越來(lái)越多的人熟識(shí)。但是云計(jì)算出來(lái)后,怎么就沒(méi)有一個(gè)Benchmark了呢?用現(xiàn)有的CPU基準(zhǔn)測(cè)試工具不能對(duì)云計(jì)算系統(tǒng)進(jìn)行測(cè)試嗎?

 云計(jì)算如何測(cè)“benchmark”?

一直讓人看不清的“云”

經(jīng)常有人宣傳,云計(jì)算將讓計(jì)算資源變得和自來(lái)水、電一樣,只需要插上插頭、打開(kāi)開(kāi)關(guān)就可以隨意使用。從而像愛(ài)迪生發(fā)明燈泡一樣再次改變我們的生活。這句話是否有夸大的成份,不能確定,但是從下面這兩張人們用手機(jī)拍照的照片可以看出,云已經(jīng)將我們的生活改變了……

云計(jì)算如何測(cè)“benchmark”?

自拍后將圖片通過(guò)社交媒體發(fā)布背后需要什么樣的云計(jì)算技術(shù)進(jìn)行支持,并不是本次要分析的重點(diǎn)。這里想討論的是,這個(gè)與人們工作、生活越來(lái)越息息相關(guān)的“云”要怎么去評(píng)估?

在一個(gè)公有云上,用戶選擇的2核、4核、8核虛擬服務(wù)器到底可以提供什么樣的計(jì)算能力?云計(jì)算的彈性可擴(kuò)展到底能自如擴(kuò)展到什么程度?用戶來(lái)購(gòu)置一套超融合設(shè)備到底可以承擔(dān)多高的應(yīng)用負(fù)載?

上述疑問(wèn)還沒(méi)人可以說(shuō)的清楚,回答往往是“您可以在現(xiàn)實(shí)的網(wǎng)絡(luò)環(huán)境中去試,有問(wèn)題提交給我們?cè)賻湍鉀Q……”

表面上看確實(shí)沒(méi)有什么問(wèn)題,云本來(lái)就是可以彈性擴(kuò)展的,運(yùn)算資源不足加vCPU,加內(nèi)存,存儲(chǔ)不夠就加存儲(chǔ),網(wǎng)絡(luò)不足加帶寬,計(jì)算、存儲(chǔ)、網(wǎng)絡(luò)都可以隨著應(yīng)用需求來(lái)自由調(diào)節(jié)。

而實(shí)際情況是這樣的嗎?

虛擬服務(wù)器的處理性能與真實(shí)服務(wù)器比較會(huì)有多大區(qū)別?

云計(jì)算系統(tǒng)可以承載的最大虛機(jī)數(shù)量是多少?

最多可以承受多少用戶的同時(shí)請(qǐng)求?

不清楚這些數(shù)據(jù),真等現(xiàn)網(wǎng)出現(xiàn)故障的時(shí)候,能及時(shí)把問(wèn)題解決嗎?當(dāng)用戶體驗(yàn)受損導(dǎo)致客戶流失后還可以再重新挽回嗎?挽回?fù)p失所花費(fèi)的代價(jià)會(huì)有多少?

云計(jì)算距離用戶越近,為什么用戶反而越無(wú)法看清?

盲人摸象——云計(jì)算評(píng)估的痛點(diǎn)

用傳統(tǒng)的CPU測(cè)試工具是否可以對(duì)云計(jì)算虛擬系統(tǒng)進(jìn)行評(píng)估?為什么長(zhǎng)期沒(méi)有一個(gè)針對(duì)云計(jì)算測(cè)試的Benchmark出臺(tái)?

這個(gè)問(wèn)題可能用兩個(gè)字就可以回答——規(guī)模。

“云”是一個(gè)包含著網(wǎng)絡(luò)、計(jì)算、存儲(chǔ)的龐大而又復(fù)雜的系統(tǒng)。在網(wǎng)絡(luò)方面,倒是有一些專用測(cè)試儀表和專業(yè)測(cè)試工具可以對(duì)網(wǎng)絡(luò)層和應(yīng)用層網(wǎng)絡(luò)性能進(jìn)行測(cè)試。但是在計(jì)算和存儲(chǔ)方面,當(dāng)前的服務(wù)器和存儲(chǔ)測(cè)試軟件,往往還是基于單點(diǎn)處理性能進(jìn)行評(píng)估。難以對(duì)大規(guī)模分布式計(jì)算、存儲(chǔ)系統(tǒng)進(jìn)行評(píng)估。

僅僅利用傳統(tǒng)計(jì)算或存儲(chǔ)測(cè)試方法對(duì)云計(jì)算的少量節(jié)點(diǎn)進(jìn)行測(cè)試,永遠(yuǎn)是盲人摸象,得到的結(jié)果也只能是似是而非。即便是獲得了某個(gè)虛擬服務(wù)器或某個(gè)存儲(chǔ)節(jié)點(diǎn)的測(cè)試性能數(shù)據(jù),但這并不能表明在大規(guī)模虛擬化應(yīng)用時(shí),依然會(huì)有這樣的應(yīng)用性能體現(xiàn)。

同樣,由于云計(jì)算大規(guī)模應(yīng)用測(cè)試平臺(tái)的匱乏,也在極大的制約著云計(jì)算技術(shù)的正常發(fā)展。當(dāng)前云計(jì)算產(chǎn)品技術(shù)突飛猛進(jìn),新硬件、新版本層出不窮??墒菦](méi)有一個(gè)可靠的云計(jì)算測(cè)試手段對(duì)其進(jìn)行評(píng)估的話,誰(shuí)又能保證這些新產(chǎn)品是否真的穩(wěn)定可用?

這不,剛看到前兩天某某云華東地區(qū)部分ECS服務(wù)器又(為什么要說(shuō)又)出現(xiàn)TOP級(jí)故障問(wèn)題。那沒(méi)出問(wèn)題的是不是就真的可靠呢,也未必,很有可能是使用的用戶還少……

 云計(jì)算如何測(cè)“benchmark”?

像照片上這種超高密度花樣翻新的計(jì)算、存儲(chǔ)產(chǎn)品,真的可以保障在大規(guī)模應(yīng)用中不出問(wèn)題?有什么數(shù)據(jù)可以進(jìn)行證明?

SPEC Cloud_IaaS 好菜不怕晚

如果問(wèn)測(cè)試CPU最權(quán)威的工具是哪個(gè),肯定有人會(huì)回答是SPEC CPU。如今SPEC又面向云計(jì)算服務(wù)提供商、云計(jì)算軟、硬件廠商和云計(jì)算學(xué)術(shù)研究人員,推出了全球首個(gè)測(cè)試基礎(chǔ)設(shè)施即服務(wù)(IaaS)性能的Benchmark工具——SPEC Cloud_IaaS。

SPEC Cloud_IaaS可以模擬多種I/O和CPU密集型云計(jì)算工作負(fù)載,模擬標(biāo)準(zhǔn)社交媒體NoSol數(shù)據(jù)庫(kù)應(yīng)用場(chǎng)景,對(duì)云計(jì)算軟、硬件產(chǎn)品的多種性能指標(biāo)進(jìn)行基準(zhǔn)測(cè)試。協(xié)助用戶更加全向的對(duì)云計(jì)算產(chǎn)品進(jìn)行深入了解。同時(shí)也可以協(xié)助云計(jì)算廠商,對(duì)自身產(chǎn)品進(jìn)行完善,盡量減少現(xiàn)實(shí)運(yùn)營(yíng)過(guò)程中,云計(jì)算系統(tǒng)故障的發(fā)生。

10月27日-28日SPEC亞洲峰會(huì)(暨全球計(jì)算機(jī)系統(tǒng)標(biāo)準(zhǔn)性能評(píng)估組織2016年度技術(shù)峰會(huì))將在北京召開(kāi),屆時(shí)SPEC組織的核心成員,包括SPEC總裁Walter Bays、SPECpower委員會(huì)主席Klaus-Dieter Lange將親臨大會(huì)現(xiàn)場(chǎng)與中國(guó)用戶交流。同時(shí)還將有更全面的SPEC Cloud_IaaS測(cè)試方法對(duì)外公開(kāi)發(fā)布。歡迎對(duì)此感興趣的同仁踴躍參與。

消息來(lái)源:至頂網(wǎng)