在本篇博文中,我們將深入探討Opensignal的核心內涵:闡述我們所使用的指標,它們是什麽,以及它們在衡量用戶真實移動網絡服務體驗方面所扮演的角色。
首先,我們是如何收集數據的呢?
每天,我們都會從全球1億多臺設備中收集到數十億個測量數據。我們會每天全天候收集設備持有人在生活、工作和旅行過程中所產生的的所有數據:不是模擬、不是預測,更不是在理想條件下進行的測試。我們的數據源來自真實的智能手機用戶,并且我們據實呈現用戶的實際網絡體驗。無論他們是在室內還是室外,奔波於繁忙的城市還是在鄉村徒步旅行。
我們通過應用程序後臺運行的自動化測試收集絕大多數數據,這使得我們能夠以業界最大規模且最高頻率地报导用戶的真實移動網絡體驗。這些自動測試會隨機運行,因此其呈現出的是用戶在任何給定時刻所獲得的特定體驗。
視頻體驗-測量實際的移動視頻流
Opensignal的視頻體驗指標是通過測量3G和4G網絡上的實際視頻流來量化視頻流加載至移動設備的體驗值。該指標基於國際電信聯盟(ITU)標準對其進行詳細分析,從而得出了技術參數(包括圖像質量、視頻加載時間和卡顿率)與用戶實際視頻體驗之間的關系。為了量化視頻體驗,我們直接檢測了終端設備的視頻流,並通過ITU方法量化每個運營商的整體視頻體驗(得分在0到100範圍內)。用于測試的視頻含混合分辨率,並直接由世界最大的視頻內容提供商傳輸而來。
以下得分範圍可用於量化視頻體驗與用戶實際視頻體驗之間的關系:
- 75 或以上 優秀:所有用戶、視頻流提供商和分辨率測試的體驗壹致,其加載速度快且幾乎不存在卡頓。
- 65 - 75 非常好: 通常情況下,加載時間短,僅偶爾卡頓,但用戶和/或視頻提供商/分辨率之間的體驗仍存在壹定差異。
- 55 - 65 良好: 即使視頻流来自相同提供商,用戶體驗好壞參半,尤其是高分辨率視頻,加載時間長、卡頓等問題並不少見。
- 40 - 55 壹般: 高分辨率視頻(加載時間長且卡頓多)或壹些視頻流,用戶體驗都壹般。但是,對於低分辨率視頻,用戶體驗勉強達標。
- 40以下 差:對所有提供商而言體驗都不好,即使是低分辨率視頻。加載時間長且頻繁卡頓。
由於視頻是移動網絡上最大的流量,預計其消費量將隨著消費者需求增長,因此该指標將会非常關鍵。Opensignal致力于測量移動網絡上的消費者實際體驗值,視頻體驗是關鍵元素之一。
除了視頻體驗之外,我們還報告了與視頻相關的兩個支持指標:
- 4G 視頻體驗:運營商4G/LTE上的平均視頻體驗分數
- 3G視頻體驗:運營商3G上(如UMTS/HSPA或CDMA 1X EV-DO)的平均視頻體驗分數。
遊戲體驗
Opensignal的遊戲體驗指標量化移動用戶在運營商網絡上多人在线遊戲的實時體驗,得分範圍為0到100。其對移動網絡條件(包括延遲、丟包和抖動)對多人在线遊戲的實時體驗的影響進行了分析,以確定其對遊戲體驗的影響。
遊戲體驗指標量化連接到全球服務器的移動設備玩家上玩多人在线遊戲的實時體驗。該方法依托多年的研究數據,將實際移動用戶所體驗到的網絡技術參數與遊戲感受進行关联。上述參數包括延遲、抖動(延遲的稳定性)和丟包率(永遠無法到達目的地的數據包的占比)。此外,它還測試了多種類型的多人移動遊戲來衡量對網絡條件的平均敏感度。其中,測試過的遊戲包括壹些全球最流行的實時多人移動遊戲(如《堡壘之夜》、《實況足球》和《傳說對決》)。.
匯總分析遊戲體驗,首先要量化從用戶設備到加載實際遊戲的互聯網端口的端到端體驗值。得分範圍為在0到100的範圍內。
Opensignal手機遊戲體驗有以下幾類:
- 85或以上 優秀:絕大多數用戶認為這種網絡體驗是可以接受的。幾乎所有的被調查玩家都覺得遊戲操控起來很流暢,他們的操作能夠得到及時反應。幾乎所有的實例都沒有明顯的延遲。
- 75 - 85 良好:大多數用戶認為體驗可以接受。用戶表示遊戲過程中操作流暢,用戶在遊戲過程中的操作會得到及時反應。大多數用戶認為在他們的操作和反應之間不存在延遲。
- 65 - 75 壹般:用戶發現體驗“壹般”。多數情況下,平臺會對玩家的操作做出反應,多數用戶表示遊戲過程中操作流暢。多數玩家表示他們操作和反應結果之間存在延遲。
- 40 - 65 差:大多數用戶認為這種級別體驗水平是不可接受的。大多數用戶在遊戲過程中都遇到延遲問題,且他們的操作不能得到即時反應。很多用戶覺得遊戲過程中操作不流暢。
- 40以下 非常差:幾乎所有用戶都認為這種級別體驗是不可接受的。幾乎所有的用戶在遊戲過程中都遇到過明顯的延遲問題,且大多數用戶遊戲過程中操作不流暢。絕大多數玩家的操作問題未得到即時反饋。
語音應用體驗–量化語音質量
Opensignal的語音應用程序體驗是衡量(OTT)語音服務的體驗質量的應用程序——移動語音應用程序,如WhatsApp、Skype,Facebook Messenger等——使用國際電信聯盟(ITU)的模型來量化整體語音通話質量和壹系列經校準的技術參數。該模型精準地向我們展示了技術測量和可感知到的通話質量之間的關系。每個運營商的語音應用體驗得分在0到100分範圍內。
- 95 或以上 優秀:絕大多數用戶都非常滿意。運營商能夠為整個客戶群提供始終如壹的良好OTT語音質量體驗。
- 87- 95 非常好:大多數用戶滿意。大多數情況向,運營商能夠提供良好的OTT語音質量體驗。偶爾,可能會出現語音服務受損的情況,這主要涉及與響度有關的問題。
- 80 - 87 良好:很多用戶滿意。有些用戶體會驗到的輕微通話質量損害。有時會背景因嘈雜,使得通話模糊或不夠響亮。偶爾還會會出現音頻失真。
- 74 - 80 可接受:用戶滿意。有些用戶遇到可感知的通話質量損害問題。客戶會遇到短時間的音頻失真,和/或音量可能不夠大。通話的對象通常能夠理解,因此不必重復。
- 66 - 74 差:許多用戶不滿意。許多用戶遇到的通話質量問題。通話過程中會出現音頻失真、或靜音,這些情況可以明顯感覺到,且令人惱火。
- 60 - 66:非常差:大多數用戶不滿意。大多數用戶遇到的重大通話質量損害。在通話過程中偶爾出現失真、或沈默的情況。如果不重復,很難理解談話的某些部分。
- 45 - 60 無法理解:幾乎所有用戶都不滿意。在通話過程中,經常會長時間卡頓、出現哢嚓聲或音頻失真。對方理解通話內容需要頻繁重復,或者通話頻繁重疊。
- 45以下 無法溝通
除了語音應用程序體驗之外,我們還在報告展示了與語音應用程序相關的兩個輔助指標:
- 4G 語音應用程序體驗:該指標量化了Opensignal用戶連接到任何運營商LTE後所體驗到的移動語音服務體驗。
- 3G語音應用體驗:這個指標量化了Opensignal用戶連接到3G後所體驗到的移動語音服務體驗。
下載速度體驗–用戶所體驗的真實網絡速度
下載速度體驗是指用戶在運營商移動數據網絡中的特定日常速度(以Mbps為單位)。除了下載速度體驗外,我們還在報告中展示了與下載速度相關的三個輔助指標:
- 4G 下載速度:連接到運營商4G/LTE後的平均下行速度
- 3G下載速度:連接到運營商3G後的平均下行速度(例如UMTS/HSPA或CDMA 1X EV-DO)
峰值下載速度:是指衡量Opensignal用戶在實際網絡中體驗到的最快下載速度。通過僅查看最快下載速度的測試,我們將技術或網絡擁塞限制的影響降到最低,而非提供Opensignal用戶在實際環境中體驗到的最佳速度的估計。請註意,這與理想條件下測量的最佳速度或理論上的最大速度是不同的。事實上,用戶自己永遠無法體驗到這種速度。為了評估峰值速度,我們取樣了98%的用戶所體驗到的速度。
上傳速度體驗
我們的上傳速度體驗度量是用倆衡量每個運營商的移動數據網絡的平均上傳速度。通常情況下,上傳速度要比下載速度慢。因為,目前的移動寬帶技術主要將資源集中於盡可能最佳的下載速度。隨著移動互聯網發展趨勢由下載服務轉向創建內容和實時通信服務,上傳速度將會變得越來越重要,新技術也會不斷湧現,從而提升上遊容量。
除了上傳速度體驗外,我們還在報告展示了與上傳速度相關的三個輔助指標:
- 4G上傳速度:連接到運營商4G/LTE後的平均上行速度
- 3G上傳速度:連接到運營商3G後的平均上行速度(例如UMTS/HSPA或CDMA 1X EV-DO)
峰值上傳速度:是指衡量Opensignal用戶在實際網絡中體驗的最快上傳速度。通過僅查看最快上傳速度的測試,我們將技術或網絡擁塞限制的影響降到最低,而非提供Opensignal用戶在實際網絡環境中體驗的最佳速度的估計。請註意,這與理想條件下測量的最佳速度或理論上的最大速度是不同的。事實上,用戶自己永遠無法體驗到這種速度。為了評估峰值速度,我們取樣了98%用戶所體驗到的速度。
延遲體驗——量化延遲
延遲是指數據在網絡中上傳、下載過程中,用戶體驗到的延遲。如果您的網絡延遲很嚴重,則網絡卡頓明顯,其對您的指令的響應也會較慢。我們以毫秒為單位測量延遲體驗,它表明了用戶連接到運營商的3G和4G網絡後所體驗的特定延遲。它是根據特定用戶連接到每個網絡所花費的時間占比計算出的單個3G和4G延遲的加權平均值。
我們所有的下載、上傳和延遲速度都是測試最受歡迎的互聯網內容交付網絡(CDN)服務器(而不是在專用測試服務器上,在這些服務器上,指令可能遵循不同的路徑達到正常流量,又或者甚至以不具有代表性的方式進行優先級排序),從而幫助我們準確理解特定的用戶體驗。
除了延遲體驗之外,我們還在報告展示了與延遲相關的兩個輔助指標:
- 4G延遲:用戶連接運營商的4G/LTE後所體驗的平均延遲。
- 3G延遲:用戶連接運營商的3G後(如UMTS/HSPA或CDMA 1X EV-DO)所體驗的的平均延遲。
更新:自2020年5月起,我們的公開報告不再包含“延遲體驗”、“4G延遲體驗”和“3G延遲體驗”
4G可用率——以用戶為中心的方法
我們的4G可用率是指擁有4G能力的用戶連接LTE的時間占比。當我們報告顯示平均4G可用率為75%時,這意味著我們的用戶平均有75%的時間連接到LTE服務。
可用性率并非是對網絡覆蓋範圍或地理範圍的度量。它無法保證妳計劃訪問的偏遠地區是否具备4G網絡。相反,它衡量的是網絡連接类型的時間占比,以及他們最常出現的地方,而傳統的覆蓋指標恰恰忽略了這點。查看用戶何時能連接LTE,而不是在哪裏,我們就可以更準確地反映出真實的用戶體驗。
我們還追蹤了讓移動用戶最沮喪的實例——當根本沒有信號可連接時。對於客戶而言,最常見的網絡覆蓋死角是在室內。由於我們的大部分可用性數據都是在室內收集的(這並不奇怪,因為這是用戶花費大部分時間的地方),因此我們对无覆蓋區域的檢測特別精準。
4G 覆蓋體驗
Opensignal的4G覆蓋體驗度量標是衡量移動用戶在運營商網絡上对4G覆蓋的體驗。量化得分範圍為0-10分。其反映目標網絡運營商的用戶接收到4G信號的位置與全部網絡運營商的用戶訪問的位置的關系。
簡單來說,4G覆蓋體驗衡量所有對日常用戶最重要的位置(即他們生活、工作和旅行的所有位置)的移動覆蓋體驗。它考慮了全部Opensignal用戶訪問的所有區域、目標網絡運營商4G可用的地点,其中用戶密集訪問的地点更加重要。
想測一下自己的體驗得分嗎?下載我們的 Opensignal or Meteor app。 這兩個應用程序都可以在Android系統和iOS系統上使用!
©2020 Opensignal 有限公司,版權所有。
Opensignal有限公司版權所有,包括所有知識產權、數據、內容、圖表和分析。未經事先書面同意,任何商業目的(包括在廣告或其他宣傳內容中使用)引用、復制、轉發和發布Opensignal有限公司制作的報告和見解都屬於違法行為。但,歡迎記者朋友們引用Opensignal報告中包含的信息和見解,前提是這些信息註明了信息的來源。相關詳細信息,請聯系發送郵件至 [email protected] 。
Opensignal Limited retains ownership of this insight including all intellectual property rights, data, content, graphs & analysis. Reports and insights produced by Opensignal Limited may not be quoted, reproduced, distributed, published for any commercial purpose (including use in advertisements or other promotional content) without prior written consent. Journalists are encouraged to quote information included in Opensignal reports and insights provided they include clear source attribution. For more information, contact [email protected].