Huawei多款手機違反測試規範，遭3DMark撤銷測試成績
 

https://www.techbang.com/posts/6098...ion-test-scores



3DMark是市面上最專業的顯示效能測試工具之一，不但支援Windows平台電腦，也具有相容於Android、iOS等裝置的版本，

這次的事件起因為科技媒體AnandTech發現Huawei推出的手機以不正當手段取得較佳成績，經3DMARK開發公司UL確認過後，最終撤銷多款手機成績。



然而日前AnandTech的報導指出，多款Huawei與其子品牌Honor的智慧型手機，似乎透過人為方式產生異常高分且具誤導性的測試成績，而根據美國市場研究公司IDC的資料，
Huawei是世界上銷量排名第二的智慧型手機製造商。


UL在自己的實驗室測試了這些疑似被動過手腳的產品，並確認這些產品違反測試規範後，決定將受到影響的型號從裝置清單與成績排行榜中移除。

UL如何確認問題？
為了要驗證Huawei智慧型手機是否真的有為了測試成績而動了手腳，UL分別使用公開於Google Play網路商店的公開版3DMark App與公司內部專用的版本進行測試，結果發現在同一測試項目下，公開版的測試成績比內部版高出47%。
對於這個狀況，UL引用了AnandTech所提出的解釋，指出當這些智慧型手機在執行公開版3DMark的時候，顯然是開啟「效能模式」並覆蓋原本的電力設定檔，透過有高於正常執行狀態的耗電量來提升效能表現。
而這種成績上的差異，可以判斷出這這些裝置只是單純依據App的名稱為3DMark，就開啟效能模式，而不是透過處理的工作種類進行分辨，這種偵測方式與最佳化是被UL提供給手機製造商的規範所禁止。
UL也與Huawei聯繫，討論此一調查結果，UL表示他們很高興Huawei承諾在未來的系統更新中導入更透明的測試方法，並計劃提供使用者自由切換效能模式的設定選項。

▲ 從UL提供的測試數據可以看到，使用公開版3DMark測試的成績比內部版高出許多。
UL表示在目前的測試規範下，並沒有禁止手機製造商為產品加入效能模式，惟執行測試時需將效能模式預設為關閉狀態，讓測試App與其他App在一樣的環境中執行。
然而在這次出現問題的手機中，有個奇妙的巧合，那就是這些手機都是採用Huawei旗下HiSilicon所生產的Kirin 970處理器，是否因為這款處理器背負著不能輸的壓力而引發這次事件，就只有Huawei自己最清楚了。

--------------------------------------------
分數是真的，考試時比較平常努力有何不對啊?

那要同學也是預先知道考題班
分數的比較才有意義

華為可以去參加另一個預先知道考題班
考試後再比較分數高低

不就是先知道今天只考數學，所以前一秒我CPU只算數學，放棄國英
現在比考數學，我做出了數學成績，你卻說我作弊@@

猜測是超速模式時耗電太高, 但只有跑分才會開啟, 其他廠商會輸得不甘願.
內文有說考慮增加"效能模式" 給使用者去選.

這剛好和蘋果上次的降速事件相反..蘋果是為了省電才降頻.
只是蘋果偷偷降頻也沒跟使用者講.
蘋果現在有開省電模式給使用者選用了 . 蘋果電池容量都偏小, 我也會開省電模式來用.

說穿了 這些行動裝置都沒有硬性規定功耗上限,
以現在的硬體技術, 加電壓加頻率就能夠輕易產生很大的效能差距.

那要其他同學也要這樣做
橫向比較才有意義

只有華為這樣做也行
自己跟自己比就好

就原文敘述來看，這樣確實不太公平沒錯..

主要還是在於3D MARK沒辦法連同電量一起測，
不然發現開啟3D MARK後發現電量其他應用表現通通下滑，那就很明顯有問題了。
但是假如3DMARK只能測試效能，那就會發生這種情況..

所以要嘛就是，每一家大廠通通開啟無視其他背景軟體、電量全速跑分，
不然就是大家維持基本應用時去測試分數。

簡單來說就是，華為這麼做，讓消費者失去一個簡單的判斷基準..

大家都知道大大非常愛華為，但考試規定得清清楚楚，作弊就是作弊

https://benchmarks.ul.com/zh-hans/s...edirected=true#

只要全班同學一起作弊的話
還是能橫向比較的

但作弊也有很多種
有些只是打雞血, 有些是短時間內使用「天魔解體大法」
同樣是作弊, 但出來的結果可能也差很遠