MediaTek ahora ofrece trampas de referencia móvil como servicio

MediaTek1

Hacer trampa en los puntos de referencia es un problema que surge en muchos contextos diferentes en las industrias de PC y dispositivos móviles, pero hasta ahora, las trampas se limitaban típicamente a las implementaciones OEM del SoC de una empresa diferente. MediaTek, aparentemente, ha decidido simplificar el proceso y ha estado vendiendo dispositivos que incluyen funciones de trampa de referencia integradas en el firmware.

Eso es palabra de Anandtech, que ha estado realizando una investigación en curso sobre este problema. La investigación del sitio encontró varios dispositivos de varios fabricantes, cada uno con un archivo Power_Whitelist_CFG.xml similar con las mismas aplicaciones cargadas en él. Anandtech presenta evidencia de que estos archivos provienen de MediaTek y están integrados en el SoC BSP (Board Support Package), definido como 'la capa de software que contiene controladores específicos de hardware y otras rutinas'.

Imagen de Anandtech



Hay muchos ángulos inquietantes en este engaño. Ha estado sucediendo desde 2016, está presente en múltiples dispositivos, incluidos los de compañías como Sony, afecta una amplia variedad de pruebas, incluidas las pruebas de inteligencia artificial más recientes, e incluye aplicaciones en las que no hemos visto empresas que engañen antes. Debido a que este tipo de trampa funciona eliminando los límites térmicos y de potencia y dejando que el SoC se vuelva loco, también existe el riesgo de que la batería se degrade y se sobrecaliente más rápido, sin actual ganancia de rendimiento. Recuerde: esta no es una función que una empresa haya creado para mejorar el rendimiento en las aplicaciones que ya usa. Tiene la intención de mentirle haciéndole pensar que las ganancias de rendimiento en las aplicaciones son mayores de lo que son.

El problema de las trampas

La respuesta de MediaTek a Anandtech no es más que una semi-admisión de culpa autocontradictoria. La compañía afirma que sus dispositivos 'siguen los estándares aceptados de la industria' y que las pruebas se ejecutan al máximo reloj y consumo de energía sin ninguno de los límites térmicos que se aplican en otras circunstancias para 'mostrar todas las capacidades del chipset'.

Hay verdad en esto. Los dispositivos móviles modernos están limitados térmicamente y, por lo general, solo pueden funcionar con relojes de refuerzo durante períodos cortos de tiempo. Pero el punto de evaluación comparativa un teléfono inteligente no es solo para probar el rendimiento individual de un componente de bajo nivel como la CPU, la GPU o el coprocesador de IA. El objetivo de realizar estas comparaciones es brindar a los usuarios finales una idea general de cómo es usar el teléfono.

Esto también se aplica a los componentes de PC. La mayoría de las veces, la gente piensa que las reseñas se escriben en base a resultados de referencia. Los revisores miden el rendimiento en una variedad de pruebas y luego escriben la revisión en función de cómo se compara el hardware en varias métricas. En general, esto es cierto, pero hay otro lado de las cosas: los revisores también intentan encontrar puntos de referencia que capturen la experiencia de usar el dispositivo.

Imagine, por ejemplo, que una GPU se diseñó para usar un conjunto de reglas térmicas y de potencia al ejecutar puntos de referencia populares y otro conjunto de reglas que la dejaran mucho más cercana en rendimiento a un competidor cuando ejecuta los juegos más populares. Esto rompe todo el punto y el propósito de un punto de referencia: literalmente, ya no le dice nada valioso sobre la experiencia más amplia de usar el teléfono.

La respuesta de MediaTek dice: 'Creemos que mostrar todas las capacidades de un chipset en las pruebas de evaluación comparativa está en línea con las prácticas de otras empresas y brinda a los consumidores una imagen precisa del rendimiento del dispositivo'.

La primera oración puede ser cierta, pero la segunda definición no lo es. El objetivo de este tipo de trampas es brindar a los clientes una imagen inexacta del rendimiento del dispositivo.

Uno de los principales problemas con este tipo de trampas es que una vez que empiezas, es difícil parar. Para ver un ejemplo de por qué, considere nuestro reciente Revisión de Surface Laptop 3. El rendimiento relativo de la CPU entre el 7700HQ (un Kaby Lake de cuatro núcleos de 2016 con un TDP de 45 W) y el Core i7-1065G7 (un Ice Lake de cuatro núcleos de 2020 con un TDP de 15 W) fue la forma en que el 7700HQ fue consistentemente más rápido en múltiples subprocesos gracias a un TDP más alto, pero aún se quedó atrás del chip más nuevo en las pruebas de un solo subproceso.

Ahora, imagine que Intel y Microsoft permitieron que Surface Laptop 3 aumentara hasta 45W TDP temporalmente mientras se probaba con otros chips y solo aplicaron el límite de 15W en uso regular. Los resultados de mis pruebas habrían sido radicalmente diferentes. En realidad, una CPU de 45W TDP Kaby Lake es a menudo más rápida que una CPU de 15W Ice Lake en código multiproceso. En este caso hipotético, sin embargo, una patada temporal a 45W habría permitido que Ice Lake hiciera hash de Kaby, y habría hecho que Surface Laptop 3 pareciera como si la eficiencia de la CPU hubiera mejorado. lejos más de lo que tiene.

Pero si Intel y Microsoft hubieran comenzado a manipular los resultados de las pruebas comparativas de esta manera en 2016, cambiar la metodología en 2020 haría que Ice Lake pareciera mucho más débil de lo que realmente era. Una vez que ha comenzado a mentir a los clientes, por lo general tiene que seguir haciéndolo o deshacerse lentamente del esfuerzo con el tiempo, de una manera lo suficientemente gradual para que la gente no se dé cuenta de lo que ha sucedido.

Manipular resultados de pruebas como este siempre resulta contraproducente para la empresa que lo hace. Lo único que ha demostrado MediaTek es que sus equipos de ingeniería son incapaces de igualar los resultados que otros fabricantes logran de manera honesta y deben, por lo tanto, hacer trampa para compensar la diferencia. Una empresa que le mienta sobre su desempeño no tendrá reparos en mentirle sobre todo lo demás.

Copyright © Todos Los Derechos Reservados | 2007es.com