MLCommons lanza benchmarks de IA para ordenadores de consumo

MLCommons lanza nuevos benchmarks de rendimiento de IA para ordenadores de consumo

Con el creciente avance de la inteligencia artificial (IA) desde la nube hasta los dispositivos, surge la necesidad de conocer qué ordenadores serán capaces de ejecutar aplicaciones impulsadas por la IA de forma más rápida que otros modelos disponibles en el mercado. MLCommons, el grupo de la industria detrás de varios estándares de evaluación de hardware relacionados con la IA, pretende facilitar la comparación entre dispositivos con el lanzamiento de benchmarks de rendimiento dirigidos a los "sistemas de cliente", es decir, a los ordenadores de consumo.

El grupo de trabajo recién formado por MLCommons, llamado MLPerf Client, tiene como objetivo establecer benchmarks de IA para ordenadores de sobremesa, portátiles y estaciones de trabajo que funcionen con Windows, Linux y otros sistemas operativos populares. Los benchmarks se centrarán en casos de uso reales y estarán basados en la retroalimentación de la comunidad.

El primer benchmark de MLPerf Client se centrará en modelos generadores de texto, en concreto en Llama 2 de Meta, que según el director ejecutivo de MLCommons, David Kanter, ya se ha incorporado a otras suites de evaluación de hardware para centros de datos. Meta también ha trabajado extensamente en Llama 2 junto con Qualcomm y Microsoft para optimizarlo en dispositivos con Windows, lo cual beneficiará a los dispositivos que funcionen con este sistema operativo.

"Es el momento oportuno para llevar MLPerf a los sistemas de cliente, ya que la IA se está convirtiendo en una parte esperada de la informática en todas partes", afirmó Kanter en un comunicado de prensa. "Esperamos colaborar con nuestros miembros para llevar la excelencia de MLPerf a los sistemas de cliente y ofrecer nuevas capacidades a la comunidad en general".

Entre los miembros del grupo de trabajo MLPerf Client se encuentran AMD, Arm, Asus, Dell, Intel, Lenovo, Microsoft, Nvidia y Qualcomm, aunque no se incluye a Apple, lo cual no es sorprendente, ya que Apple tampoco es miembro de MLCommons. El hecho de que un director de ingeniería de Microsoft (Yannis Minadakis) copresida el grupo MLPerf Client podría explicar esta ausencia. Sin embargo, es decepcionante que los benchmarks de IA que se desarrollen no se prueben en dispositivos de Apple, al menos a corto plazo.

Aun así, resulta interesante ver qué tipo de benchmarks y herramientas surgirán de MLPerf Client, ya sea para macOS o no. Suponiendo que la IA se mantenga como una tecnología clave en el futuro, no sería sorprendente que los benchmarks de IA desempeñen un papel cada vez más importante en las decisiones de compra de dispositivos. En el mejor de los casos, los benchmarks de MLPerf Client podrían ser similares a las herramientas de comparación de construcción de PC disponibles en línea, proporcionando una indicación del rendimiento de las aplicaciones de IA que se puede esperar de una máquina en particular. Quizás en el futuro se amplíen para incluir teléfonos y tabletas, dada la participación de Qualcomm y Arm, que tienen una fuerte presencia en el ecosistema de dispositivos móviles. Aunque todavía es pronto, tenemos esperanzas de que así sea.