Geekbench AI llega a la versión 1.0: CPUs, GPUs y NPUs obtienen por fin una solución de benchmarking de IA

Primate Labs, el desarrollador de la popular suite de pruebas Geekbench, ha lanzado Geekbench AI, una completa herramienta de pruebas diseñada para medir las capacidades de inteligencia artificial de varios dispositivos. Geekbench AI, conocido anteriormente como Geekbench ML durante su fase de vista previa, ha alcanzado ahora la versión 1.0. El benchmark está disponible en múltiples sistemas operativos, como Windows, Linux, macOS, Android e iOS, lo que lo hace accesible a muchos usuarios y desarrolladores. Una de las principales características de Geekbench AI es su enfoque polifacético de la puntuación. El banco de pruebas utiliza tres niveles de precisión distintos: precisión simple, precisión media y datos cuantizados. El objetivo de esta evaluación es ofrecer una representación más precisa del rendimiento de la IA en distintos diseños de hardware.

Además de la velocidad, Geekbench AI hace especial hincapié en la precisión. El banco de pruebas evalúa hasta qué punto los resultados de cada prueba coinciden con los esperados, lo que permite comprender mejor la relación entre rendimiento y precisión. La versión 1.0 de Geekbench AI es compatible con nuevos marcos de trabajo, como OpenVINO, ONNX y Qualcomm QNN, lo que amplía su compatibilidad con diversas plataformas. Primate Labs también ha implementado medidas para garantizar comparaciones justas, como la imposición de duraciones mínimas de ejecución para cada carga de trabajo. La compañía ha señalado que Samsung y NVIDIA ya utilizan el software para medir el rendimiento de sus chips, lo que demuestra que su adopción es ya muy generalizada. Aunque el banco de pruebas proporciona información valiosa, las aplicaciones de IA en el mundo real son todavía limitadas, y basarse en unos pocos bancos de pruebas puede ofrecer una imagen parcial. No obstante, Geekbench AI representa un importante paso adelante en la estandarización de la medición del rendimiento de la IA, lo que podría influir en las futuras decisiones de los consumidores en el mercado tecnológico impulsado por la IA. Los resultados de las pruebas pueden consultarse aquí.

Fuentes: Geekbench, vía Tom's Hardware