AnandTech a publié une longue enquête sur le cas des puces du fabricant. Lors de tests, nos confrères ont remarqué que le Reno3 Pro d’Oppo en version européenne (avec un SoC Helio P95) était largement au-dessus du Reno3 chinois avec un Dimensity 1000L censé être plus performant.
Pour en avoir le cœur net, ils ont demandé à UL une version « anonyme » de PCMark et le résultat est sans appel : « une différence de 30 % dans le score global, avec jusqu’à une différence de 75% dans les sous-tests », sur le même SoC évidemment.
La cause a été identifiée par AnandTech : un fichier power_whitelist_cfg.xml dans /vendor/etc permettant d’activer un « mode sport » sur certaines applications, notamment PCMark, GeekBench, AnTuTu et 3DBench.
Oppo n’est pas le seul fabricant concerné, ce fichier se trouvant dans des téléphones Vivo, Xiaomi, Realme, iVoomi et Sony, avec des réglages différents suivant les applications et les smartphones.
MediaTek répond timidement à nos confrères : « Nous travaillons en étroite collaboration avec les fabricants lorsqu’il s’agit de tester les terminaux équipés de nos chipsets, mais en fin de compte, les marques ont la flexibilité de configurer leurs propres terminaux comme bon leur semble ».
Nos confrères expliquent enfin que MediaTek fait référence aux « exigences du marché » pour justifier sa démarche, comme s’il s’agissant d’une « norme de l’industrie »… ce qui toucherait au cœur du problème : « Ces mécanismes n’existeraient pas s’il n’y avait pas de demande des fabricants à MediaTek pour fournir une telle solution ».
Commentaires (17)
#1
Mediatek, c’est comme Bosh pour les antipollution… ce n’est pas éthique (voir illégal), mais Il y a de la demande, donc pourquoi sen priver de mettre en place ces “astuces” ?
#2
La seule solution est donc que les softs de bench fournissent systématiquement des versions anonymisées aux journalistes pour leurs tests … voire qu’ils propose des apks dont l’identifiant est complètement random sur leur site.
#3
#4
C’est pour cela qu’il ne faut pas lire un seul banc d’essai mais plusieurs et surtout pas les plus célèbres.
Les meilleurs publications étant celles qui appartiennent à leur journalistes. Ça court pas les rues.
#5
#6
« Ces mécanismes n’existeraient pas s’il n’y avait pas de demande des fabricants à MediaTek pour fournir une telle solution ».
Pour information, il y a aussi de la demande pour tueur à gages, trafiquant de drogue, etc.
#7
Je n’ai pas souvenir d’avoir lu quoi que ce soit sur PSA mais Renault s’est lui aussi fait choper la main dans le sac avec des taux de rejets de CO2 jusqu’à 10 fois supérieurs aux valeurs annoncées selon les modèles, bizarrement les médias Français en ont nettement moins parlé que quand ça ne concernait que les constructeurs Allemands ….
#8
Et ces “jobs” existent bel et bien
" /> Tu veux en venir où avec ça ?
#9
Ils pourraient se mettre à analyser les apk installés et générer une empreinte pour les logiciels de mesure de performances.
#10
“comme s’il s’agissant”
" />
#11
#12
Pour Renault, c’est plus qu’ils ne veulent pas faire des tests sur routes sinon ils sont hors normes.
Donc les tests doivent se faire à plat, sur rouleaux…
#13
Qu’utiliser ça comme argument pour justifier ses mauvaises actions, c’est complètement idiot…
#14
Et les “optimisations” du pilote graphique sous Windows suivant le nom de l’exécutable, les benchmarks en font partie…
#15
Ce dont je parlais c’est effectivement un test pratiqué dans des conditions “réalistes” par un labo indépendant juste après que le scandale VW ai éclaté, quand autant nos politiques que nos constructeurs s’en donnaient à cœur joie pour baver sur les Allemands, et ça leur avait tous fermer leurs bouches tant les chiffres réels étaient loin des chiffres annoncés (de l’ordre du rapport 10 et plus de mémoire)
D’ailleurs une petite recherche vite fait renvoi des articles intéressant
#16
Certes, mais comme tous les constructeurs qui “optimisaient” les réglages pour avoir les meilleurs résultats aux tests harmonisés (mais non représentatifs) tout en étant compatibles d’une utilisation quotidienne, ce qui a donné lieu aux nouvelles normes d’homologation plus proches d’une utilisation réelle
Là où Volkswagen group (VW, Audi, Seat, Skoda) a implanté un bout de soft qui détectait les phases de tests et utilisait à ce moment une cartographie moteur totalement tournée vers la réponse à ce test et donc différent du comportement habituel.
Les tests n’étaient effectivement pas représentatif, mais permettaient au moins de comparer les véhicules entre eux, ce qui n’était plus le cas pour ceux du groupe VW.
L’origine considérée comme la plus probable est un grand ponte qui a décidé que VW parviendrait à homologuer des voitures diesel aux US (chose quasi-impossible au vu des critères d’homologation pour un véhicule léger diesel là-bas), et qui comme d’habitude a dit aux techniciens qui soulevait le problème technique : “démerdez-vous”.
#17