SPEC ofrece una importante actualización del benchmark SPECworkstation 4.0 y añade cargas de trabajo AI/ML

Standard Performance Evaluation Corporation (SPEC), líder mundial de confianza en pruebas de rendimiento informático, ha anunciado hoy la disponibilidad de la prueba SPECworkstation 4.0, una importante actualización de la completa herramienta de SPEC diseñada para medir todos los aspectos clave del rendimiento de las estaciones de trabajo. Esta importante actualización de la versión 3.1 incorpora características de vanguardia para seguir el ritmo de las últimas novedades en hardware para estaciones de trabajo y la evolución de las demandas de las aplicaciones profesionales, incluida la creciente dependencia de la analítica de datos, la IA y el aprendizaje automático (ML).

El nuevo benchmark SPECworkstation 4.0 proporciona una medida sólida y real del rendimiento de CPU, gráficos, aceleradores y discos, garantizando que los profesionales dispongan de los datos que necesitan para tomar decisiones informadas sobre sus inversiones en hardware. El benchmark satisface las diversas necesidades de ingenieros, científicos y desarrolladores que confían en el hardware de las estaciones de trabajo para sus tareas diarias. Incluye aplicaciones del mundo real como Blender, Handbrake, LLVM y muchas más, proporcionando una medición exhaustiva del rendimiento en siete sectores verticales diferentes, cada uno de ellos centrado en casos de uso específicos y subsistemas críticos para los usuarios de estaciones de trabajo. El benchmark SPECworkstation 4.0 marca un hito significativo en la medición del rendimiento de la IA en estaciones de trabajo, proporcionando una herramienta imparcial, realista y basada en aplicaciones para medir cómo las estaciones de trabajo gestionan las cargas de trabajo de IA/ML.

«Un valor clave de esta versión reside en su capacidad para proporcionar a los profesionales de la IA información sobre cómo las diferentes configuraciones de hardware gestionan las diversas cargas de trabajo de IA», afirma Chandra Sakthivel, presidente de SPECwpc. Esto es esencial para optimizar la configuración de las estaciones de trabajo para tareas de IA/ML, impulsar el desarrollo de modelos más eficientes y, en última instancia, mejorar las capacidades de la tecnología de IA». A medida que los modelos de IA evolucionan, un benchmark estandarizado que pueda evaluar el rendimiento a través de varias dimensiones - como la precisión, el rendimiento y la latencia - será muy valioso para los profesionales de la industria y los investigadores.»

Principales novedades del benchmark SPECworkstation 4.0

Comparado con el benchmark SPECworkstation 3.1, el benchmark SPECworkstation 4.0 proporciona una medida más precisa, detallada y relevante del rendimiento de las estaciones de trabajo actuales, especialmente en lo que se refiere a AM/ML. Entre las principales novedades del benchmark se incluyen:

Soporte para IA/ML - El benchmark incluye un conjunto dedicado de pruebas centradas en cargas de trabajo de IA y ML, incluyendo tareas de ciencia de datos y pruebas de inferencia basadas en tiempo de ejecución de ONNX, lo que refleja la creciente importancia de la IA/ML en entornos de estaciones de trabajo.

Nuevas cargas de trabajo

Autodesk Inventor: Mide métricas de rendimiento clave en Inventor, un paquete de software popular en el segmento de arquitectura, ingeniería y construcción (AEC).

LLVM-Clang: Mide el rendimiento de la compilación de código utilizando el compilador y la cadena de herramientas LLVM.

Ciencia de datos: Representa el flujo de trabajo de un científico de datos, incluyendo la depuración de datos, ETL (extraer, transformar, cargar), y las operaciones clásicas de ML utilizando herramientas como Numpy, Pandas, Scikit-learn, y XGBoost.

Eliminación de líneas ocultas: Mide el tiempo que se tarda en eliminar los bordes ocluidos de los modelos wireframe.

MFEM: utiliza métodos de elementos finitos para realizar un refinamiento de malla adaptativo dinámico (AMR).

Inferencia ONNX: Evalúa la latencia y el rendimiento de la inferencia AI/ML utilizando el tiempo de ejecución ONNX, un marco popular para evaluar modelos de aprendizaje automático.

Cargas de trabajo de CPU actualizadas: Las actualizaciones de cargas de trabajo populares como Blender, Handbrake, NAMD y Octave mejoran la relevancia, precisión y compatibilidad de las mediciones de rendimiento.

Cargas de trabajo gráficas actualizadas: Pruebas adaptadas de SPECviewperf2020 v3.1: miden el rendimiento de las tarjetas gráficas profesionales utilizando trazas basadas en aplicaciones.

Nuevo subsistema Accelerator: esta versión introduce el subsistema Accelerator, reconociendo la rápida innovación en el espacio informático. Dado que los aceleradores desempeñan un papel fundamental en la aceleración de tareas como el procesamiento de IA/ML, la transcodificación de vídeo y otras operaciones de cálculo intensivo, es esencial medir y comprender su rendimiento en el entorno de las estaciones de trabajo.

Interfaces de usuario mejoradas: una interfaz de usuario completamente rediseñada simplifica el proceso de evaluación comparativa, haciéndolo más fácil de usar, y una nueva interfaz de línea de comandos (CLI) permite una automatización más sencilla.

Disponible para descarga inmediata

El benchmark SPECworkstation 4.0 está disponible para su descarga inmediata desde SPEC con una estructura de precios de dos niveles: gratuito para la comunidad de usuarios y de 5.000 dólares para los vendedores de productos y servicios relacionados con la informática. Los miembros de SPEC/GWPG reciben licencias del benchmark como beneficio de membresía.

Fuente: Standard Performance Evaluation Corporation