UL Benchmarks, bekend van de benchmark '3DMark', heeft benchmarks van diverse Huawei smartphones uit de database verwijderd nadat bekend is geworden dat Huawei de benchmarks heeft gemanipuleerd. Op diverse Huawei smartphones blijkt een benchmark detectie te draaien die na detectie van een benchmark de prestaties van de smartphone opkrikt. Vanwege de manipulatie zijn de benchmarkresultaten van Huawei smartphones niet te vergelijken met benchmarkresultaten van andere smartphones.
Anandtech ontdekte de manipulatie van benchmarks en sprak hierover met Huawei tijdens de IFA in Berlijn. Huawei bevestigde dat 'diverse smartphones' voorzien zijn van benchmark detectie om zo een gelijkwaardig beeld te creëren met smartphones van andere Chinese merken. Volgens Huawei zouden alle Chinese smartphone fabrikanten zich schuldig maken aan benchmark manipulatie.
Benchmark detectie trekt alle registers open
Wanneer een Huawei smartphone een benchmark detecteert, krijgt de processor vrij baan om alle registers open te trekken. Normaal gesproken wordt het energieverbruik van een processor beperkt om te voorkomen dat de accu van een smartphone snel leeg raakt, maar indien een benchmark wordt gedetecteerd, kan de processor tot twee keer zoveel energie verbruiken om betere prestaties weg te zetten in de benchmark.
Ook blijkt Huawei de temperatuurcontrole uit te schakelen op het moment dat er een benchmark gedraaid wordt. Doordat de processor alle ruimte krijgt om een topprestatie weg te zetten in de benchmark, neemt de temperatuur van de processor en het toestel snel toe en loopt hoger op dan normaal gesproken mogelijk is. In sommige gevallen treedt dan zelfs de oververhittingsbeveiliging van het toestel in werking.
Bekende smartphone fabrikanten jaren geleden al gestopt met benchmark manipulatie
Benchmark manipulatie is niet nieuw. In 2013 werden Samsung, HTC, LG en Asus ontmaskerd. Samsung bleek nagenoeg alle benchmark-tools te manipuleren, HTC, LG en Asus ongeveer de helft van alle beschikbare benchmarks. Nadat de manipulatie aan het licht kwam, zijn al deze fabrikanten gestopt met benchmark detectie- en manipulatie.
Benchmark manipulatie nu vooral een Chinese activiteit
In 2014 werd Huawei ook al betrapt op benchmark manipulatie met de Huawei Ascend P7, de verre voorloper van de huidige Huawei P20. Destijds had Huawei op de smartphonemarkt nog geen grote rol van betekenis, dus waaide het nieuws al snel over.
Vorig jaar werd ontdekt dat OnePlus bewust benchmarks manipuleerde met onder andere de OnePlus 3, OnePlus 3T en OnePlus 5. Na ontdekking beloofde ook OnePlus beterschap. Naast OnePlus werd ontdekt dat ook vele andere Chinese smartphone fabrikanten, waaronder MeiZu, benchmarks manipuleerde.
