聽云重磅發(fā)布：2016年第一期云評(píng)測(cè)報(bào)告

　　我們?cè)谡f起云服務(wù)的時(shí)候，廠商傳遞給我們的信息總是非常簡(jiǎn)單：打消所有的顧慮,我們會(huì)幫你處理所有的事情。 但是云服務(wù)真的能讓你省心嗎? 也許可以，但是還有一個(gè)更嚴(yán)峻的問題：當(dāng)你面對(duì)眾多云服務(wù)廠商,不懂套路的你如何選擇?牽涉指標(biāo)太多,專業(yè)的云性能指標(biāo)也不那么易懂，到底哪款適合你?

　　沒有關(guān)系這都不再是問題，繼2015年《中國(guó)公有云用戶體驗(yàn)報(bào)告》后，聽云又一重磅報(bào)告《2016第一期云評(píng)測(cè)報(bào)告》正式發(fā)布。此次報(bào)告是聽云iDaaS中心利用自主研發(fā)的聽云Network產(chǎn)品，從模擬真實(shí)用戶的角度對(duì)不同云服務(wù)的使用效果進(jìn)行對(duì)比，同時(shí)結(jié)合聽云Server、聽云Sys產(chǎn)品進(jìn)行測(cè)試,實(shí)現(xiàn)端到端的評(píng)測(cè)效果, 從首屏?xí)r間、總下載時(shí)間、首包時(shí)間、建連時(shí)間、Apdex等幾個(gè)維度對(duì)國(guó)內(nèi)13家云服務(wù)提供商進(jìn)行測(cè)試評(píng)分，并在業(yè)界公開基于用戶體驗(yàn)感知的公有云評(píng)測(cè)。

　　點(diǎn)擊鏈接，下載報(bào)告原文：http://bbs.tingyun.com/forum.php?mod=viewthread&tid=138&page=1&extra=#pid400

　　報(bào)告中的評(píng)測(cè)對(duì)象?

　　本報(bào)告選擇了13家在國(guó)內(nèi)具有代表性的云服務(wù)供應(yīng)商，他們分別是AWS、阿里云、騰訊云、百度開放云、青云、UCloud、UnitedStack、華為云、移動(dòng)云、聯(lián)通沃云、天翼云。

　　這份報(bào)告給誰看?

　　本報(bào)告意在為中小企業(yè)DevOps對(duì)云技術(shù)選型時(shí)提供技術(shù)參考。

　　或許可以幫你

　　在選擇云服務(wù)時(shí)，本報(bào)告具有有一定的參考意義;另一方面隨著CDN逐漸云化，本報(bào)告可以從技術(shù)層面指導(dǎo)用戶對(duì)云服務(wù)產(chǎn)品進(jìn)行選擇，為你在評(píng)估云廠商性能時(shí)提供技術(shù)指標(biāo)。

　　首先，讓我們從整體上看一下此次報(bào)告中各家云整體情況。

　　1、阿里云、騰訊云、UCloud在技術(shù)與服務(wù)綜合評(píng)分下，表現(xiàn)突出

　　據(jù)聽云iDaaS中心對(duì)13家云服務(wù)提供商就技術(shù)、服務(wù)兩項(xiàng)進(jìn)行綜合評(píng)價(jià)：

　　阿里云、騰訊云、UCloud、AWS-China、金山云在技術(shù)性能上表現(xiàn)突出

　　阿里云、UCloud、騰訊云、青云、百度開放云、 UnitedStack、華為云在服務(wù)易用性上略勝一籌

　　2、4家云服務(wù)提供商在性能指標(biāo)排名靠前

　　阿里云、騰訊云、AWS-China、UCloud在總下載時(shí)間、首屏?xí)r間、建連時(shí)間、首包時(shí)間、Apdex值等性能指標(biāo)方面領(lǐng)先于其他云服務(wù)提供商

　　注:技術(shù)總得分按照各個(gè)指標(biāo)排名次序計(jì)算,最后一名得1分,倒數(shù)第二名得2分,依次累加得分。 排名指標(biāo)參考客戶端指標(biāo)和服務(wù)器端Apdex。

　　3、5家云在服務(wù)易用性上并駕齊驅(qū)

　　青云、百度開放云、阿里云、UnitedStack、UCloud在是否支持網(wǎng)絡(luò)自助購(gòu)買、購(gòu)買方式、是否支持自主開票、賬戶操作易用性上并駕齊驅(qū)，領(lǐng)先于其他云服務(wù)提供商

　　注:支持自助購(gòu)買得5分,不支持得3分; 可自主獲取發(fā)票得5分,不支持得3分; 賬戶易用得5分,一般得4分,不易用得2分。

　　上面的介紹大家對(duì)各家云都有了一定的了解吧，更多細(xì)節(jié)請(qǐng)看以下《2016第一期云測(cè)評(píng)報(bào)告》詳細(xì)內(nèi)容：

　　4、用戶體驗(yàn)關(guān)鍵指標(biāo)對(duì)比

　　通過模擬用戶訪問網(wǎng)絡(luò)應(yīng)用,基于每個(gè)模擬用戶的訪問指標(biāo)進(jìn)行測(cè)試。結(jié)合用戶訪問部署在 13家云上的同一類型網(wǎng)絡(luò)應(yīng)用,進(jìn)行用戶發(fā)起 訪問的效果對(duì)比。

　　評(píng)測(cè)指標(biāo)：建連時(shí)間、首包時(shí)間、首屏?xí)r間、總下載時(shí)間

　　建連時(shí)間：10家云服務(wù)在均值以上

　　注：瀏覽器與Web服務(wù)器建立TCP/IP連接的消耗時(shí)間,TCP/IP連接三次握手的前兩次握手的時(shí)間

　　建連時(shí)間的長(zhǎng)短是網(wǎng)絡(luò)效果和服務(wù)器效應(yīng)快慢的基礎(chǔ)指標(biāo)。根據(jù)各家建連時(shí)間平均計(jì)算，建連時(shí)間均值為0.076秒。在該指標(biāo)上，除聯(lián)通沃云、UnitedStack、移動(dòng)云外，其余10家云服務(wù)均處于平均值以上，其中阿里云、金山云、華為云表現(xiàn)最為優(yōu)異。

　　首包時(shí)間：AWS-China、華為云表現(xiàn)最優(yōu)

　　注：IE瀏覽器發(fā)送HTTP請(qǐng)求結(jié)束開始,到收到Web服務(wù)器返回的第一個(gè)數(shù)據(jù)包的消耗時(shí)間。此指標(biāo)包含了發(fā)送HTTP請(qǐng) 求時(shí)最后一個(gè)數(shù)據(jù)包在網(wǎng)絡(luò)上的傳輸時(shí)間、服務(wù)器響應(yīng)此請(qǐng)求的時(shí)間和服務(wù)器回應(yīng)的第一個(gè)數(shù)據(jù)包在網(wǎng)絡(luò)上面的傳輸時(shí)間。

　　首包時(shí)間可以反映網(wǎng)絡(luò)傳輸快慢。在首包時(shí)間指標(biāo)上整體均值為0.277秒，AWS-China、華為云表現(xiàn)最優(yōu)，超過均值0.08秒。移動(dòng)云、聯(lián)通沃云、微軟云、UnitedStack、天翼云在該項(xiàng)需提高。

　　首屏?xí)r間：多家運(yùn)營(yíng)商云未超過平均標(biāo)準(zhǔn)

　　注：首屏?xí)r間是基調(diào)網(wǎng)絡(luò)首創(chuàng)的評(píng)測(cè)網(wǎng)站用戶體驗(yàn)的一個(gè)重要指標(biāo)。它是指一個(gè)網(wǎng)站被瀏覽器如IE窗口上部1024*768的區(qū)域 被充滿所需時(shí)間,反映了用戶在打開網(wǎng)站第一時(shí)間的感覺性能。

　　首屏?xí)r間是評(píng)測(cè)網(wǎng)站用戶體驗(yàn)的重要指標(biāo)，此項(xiàng)以平均值1.96秒衡量，騰訊云表現(xiàn)最為優(yōu)異，而移動(dòng)云、華為云、聯(lián)通沃云、天翼云表現(xiàn)未超過平均標(biāo)準(zhǔn)。

　　總下載時(shí)間：各家云表現(xiàn)整體差異不大

　　注：總下載時(shí)間是監(jiān)測(cè)一個(gè)頁面總的消耗時(shí)間,即從開始監(jiān)測(cè)到監(jiān)測(cè)結(jié)束的時(shí)間。

　　在總下載時(shí)間指標(biāo)上，整體差異不大，13家云均值為12.188秒。騰訊云拔得頭籌，華為云、聯(lián)通沃云、移動(dòng)云、天翼云、UnitedStack在該項(xiàng)指標(biāo)上需再提高。

　　5、后臺(tái)關(guān)鍵指標(biāo)對(duì)比

　　通過聽云Network模擬用戶對(duì)同一應(yīng)用在13個(gè)不同云環(huán)境的訪問,可以直觀的看到用戶的訪問效果。同時(shí)在應(yīng)用后臺(tái)方面基于聽云Server 和聽云Sys兩個(gè)后臺(tái)診斷產(chǎn)品,同樣可以看出同一應(yīng)用后臺(tái)程序在不同云環(huán)境下的差異。

　　后臺(tái)關(guān)鍵指標(biāo)：應(yīng)用服務(wù)器響應(yīng)時(shí)間、應(yīng)用CPU使用率、數(shù)據(jù)庫(kù)調(diào)用時(shí)間、Apdex、服務(wù)器CPU使用率、服務(wù)器Stolen-CPU、服務(wù)器內(nèi)存占用、服務(wù)器磁盤IO、服務(wù)器網(wǎng)絡(luò)IO

　　應(yīng)用服務(wù)器響應(yīng)時(shí)間：各家差異大

　　注：應(yīng)用服務(wù)器響應(yīng)時(shí)間：應(yīng)用服務(wù)器從收到請(qǐng)求到返回響應(yīng)的時(shí)間

　　在應(yīng)用服務(wù)器響應(yīng)時(shí)間指標(biāo)中，各家云相差較大，就平均值351.95毫秒而言，將近一半的云服務(wù)提供商均未達(dá)到平均值。其中，移動(dòng)云、聯(lián)通沃云高出平均值超過30%;而AWS-China、騰訊云、阿里云低于平均值40%。

　　同時(shí)，各家云測(cè)試周期內(nèi)的波動(dòng)情況差異較大。其中，聯(lián)通沃云、移動(dòng)云、天翼云波動(dòng)較大，其他家相對(duì)平穩(wěn)。

　　應(yīng)用CPU使用率：整體使用率較低，但不同公有云服務(wù)提供商差別明顯

　　注：應(yīng)用占用 CPU的波動(dòng)情況。

　　應(yīng)用CPU使用率是指CPU資源的占用情況。在該項(xiàng)指標(biāo)上，13家云表現(xiàn)出兩級(jí)分化的狀態(tài)，以平均值0.39%為限，AWS-China、騰訊云、阿里云、華為云、百度開放云、UCloud、金山云表現(xiàn)優(yōu)異。本次測(cè)試屬于輕量級(jí)應(yīng)用測(cè)試，雖然13家公有云表現(xiàn)整體使用率較低，但不同公有云服務(wù)提供商差別明顯，以此推斷如果進(jìn)行重量級(jí)別測(cè)試，那么不同公有云表現(xiàn)差別會(huì)更加顯著，有可能對(duì)應(yīng)用產(chǎn)生比較大的影響。

　　數(shù)據(jù)庫(kù)調(diào)用時(shí)間：各家表現(xiàn)差異極大

　　注：數(shù)據(jù)庫(kù)調(diào)用時(shí)間是指網(wǎng)頁訪問時(shí)后臺(tái)數(shù)據(jù)調(diào)用的時(shí)間。

　　數(shù)據(jù)庫(kù)調(diào)用時(shí)間可以反映出各家公有云對(duì)于數(shù)據(jù)庫(kù)的匹配情況。在數(shù)據(jù)庫(kù)調(diào)用時(shí)間走勢(shì)上，聯(lián)通沃云與最低值相差162倍，呈現(xiàn)出明顯高于其他云服務(wù)商的現(xiàn)象。以平均值0.82毫秒計(jì)算，聯(lián)通沃云、 微軟云、移動(dòng)云均低于數(shù)據(jù)庫(kù)調(diào)用時(shí)間整體水平。

　　Apdex分值：除個(gè)別外，整體用戶體驗(yàn)良好

　　注：Apdex值是指根據(jù)對(duì)應(yīng)用設(shè)定的T值計(jì)算得出的應(yīng)用響應(yīng)分?jǐn)?shù)。Apdex指數(shù) =(1 ×滿意數(shù)量+ 0.5 ×可容忍數(shù)量)/ 總樣本數(shù),0代表沒 有滿意用戶,1則代表所有用戶都滿意。 此處T設(shè)置為500ms。

　　根據(jù)規(guī)則，分值越接近1，則代表所有用戶都滿意，在該項(xiàng)指標(biāo)上只有移動(dòng)云、聯(lián)通沃云低于平均值0.9669，其余云服務(wù)均達(dá)到平均值以上。其中，AWS-China、阿里云、騰訊云、UnitedStack、UCloud居于用戶滿意前5位。

　　服務(wù)器CPU使用率：主要由用戶CPU利用率、系統(tǒng)CPU利用率、IO Wait組成，各指標(biāo)下各家云優(yōu)勢(shì)不同

　　?在用戶CPU利用率指標(biāo)下，各家云呈現(xiàn)出明顯分層。

　　?在系統(tǒng)CPU利用率指標(biāo)下，青云與騰訊云相對(duì)其他家占用率較高。

　　?在IO Wait指標(biāo)下，微軟云較其他家占用率較明顯且波動(dòng)較大。

　　服務(wù)器Stolen-CPU比例：聯(lián)通沃云Stolen-CPU情況明顯

　　注：服務(wù)器Stolen-CPU比例一般認(rèn)為是存在CPU泄漏的情況。

　　對(duì)于此指標(biāo)，在測(cè)試期間內(nèi)聯(lián)通沃云每日均出現(xiàn)CPU泄漏情況，而其他家云均不存在此問題。

　　服務(wù)器內(nèi)存占用：出現(xiàn)兩家獨(dú)小的情況

　　注：服務(wù)器內(nèi)存占用是指對(duì)內(nèi)存硬件的消耗情況。

　　該項(xiàng)指標(biāo)下，除了UnitedStack、聯(lián)通沃云在 2000MB內(nèi)，其他11家云服務(wù)均處于2500MB-4000MB之間。

　　服務(wù)器IO Wait比例:微軟云、金山云波動(dòng)明顯，其他家相對(duì)穩(wěn)定

　　注：服務(wù)器磁盤IO是指磁盤的讀寫速度

　　服務(wù)器網(wǎng)絡(luò)IO:發(fā)送速率上各家基本一致，接收速率上差別明顯

　　注：是指網(wǎng)絡(luò)發(fā)送速率及網(wǎng)絡(luò)接收速率。

　　?接收速率：UnitedStack波動(dòng)明顯，高于其他家接收速率，說明與其他家相比存在異常。

　　?發(fā)送速率：各家表現(xiàn)一致。

　　建議

　　1、不同云廠商在各個(gè)指標(biāo)上均呈現(xiàn)出不同的優(yōu)勢(shì)，因此不同的用戶需要根據(jù)自身特點(diǎn)進(jìn)行選擇。

　　2、本次測(cè)試的樣本訪問數(shù)量是6480UV，本次測(cè)試主要體現(xiàn)了一般中小企業(yè)在購(gòu)買云服務(wù)的基本情況，更高端的企業(yè)用戶僅供參考。

　　3、通過測(cè)試后我們對(duì)云廠商進(jìn)行了詳細(xì)的調(diào)研，我們了解到如下情況：華為云正處于產(chǎn)品新舊版本更新期，UCloud針對(duì)這種中小企業(yè)規(guī)模的云服務(wù)還有很多不同場(chǎng)景的服務(wù)策略，AWS自身更是有很多針對(duì)用戶購(gòu)買云服務(wù)后的性能優(yōu)化策略，而對(duì)于本次測(cè)試中新增的運(yùn)營(yíng)商云，其主要延續(xù)國(guó)企的辦事體制，易用性和商用化程度都需提高，另外云對(duì)于運(yùn)營(yíng)商來說現(xiàn)階段并不是業(yè)務(wù)重點(diǎn)，在運(yùn)營(yíng)商中電信的天翼云走的相對(duì)靠前，已經(jīng)慢慢和移動(dòng)云和聯(lián)通沃云拉開距離。