Gaudi 3 de Intel para la inteligencia artificial empresarial

49
Intel CEO Pat Gelsinger unveils the Intel Gaudi 3 accelerator on Tuesday, April 9, 2024.

En Intel Vision 2024, el fabricante presentó el acelerador Intel Gaudi 3 para aportar rendimiento, apertura y opciones a la IA generativa empresarial (GenAI), y dio a conocer un conjunto de nuevos sistemas abiertos escalables, productos de última generación y colaboraciones estratégicas para acelerar la adopción de GenAI. El año pasado, solo el 10% de las empresas consiguieron poner en producción proyectos de GenAI, por lo que las últimas soluciones de Intel abordan los retos a los que se enfrentan las empresas a la hora de ampliar las iniciativas de IA.

«Gracias al silicio, la innovación avanza a un ritmo sin precedentes y todas las empresas se están convirtiendo rápidamente en empresas de IA», afirma Pat Gelsinger, CEO de Intel. «Intel está llevando la IA a todas las partes de la empresa, desde la PC hasta el centro de datos y la plataforma edge. Nuestras últimas plataformas Gaudí, Xeon y Core Ultra están ofreciendo un conjunto cohesionado de soluciones flexibles adaptadas para satisfacer las necesidades cambiantes de nuestros clientes y capitalizar las inmensas oportunidades que tenemos por delante”.

Las empresas buscan escalar GenAI de piloto a producción. Para ello, necesitan soluciones de fácil acceso basadas en procesadores eficientes en cuanto a rendimiento, costes y energía, como el acelerador Intel Gaudi 3 AI. Gaudi 3 también aborda la complejidad, el coste, la fragmentación, la seguridad de los datos y los requisitos de conformidad.

Presentación de Gaudi 3 para el entrenamiento y la inferencia de inteligencia artificial
El acelerador de IA Intel Gaudi 3 impulsará sistemas de IA con hasta decenas de miles de aceleradores conectados a través del estándar común de Ethernet. Intel Gaudi 3 promete cuatro veces más capacidad de cálculo de IA para BF16 y 1,5 veces más ancho de banda de memoria que su predecesor. El acelerador ofrecerá un salto significativo en el entrenamiento y la inferencia de IA para las empresas globales que buscan desplegar GenAI a escala.

Publicidad

En comparación con Nvidia H100, se prevé que Intel Gaudi 3 ofrezca un tiempo medio de entrenamiento un 70% más rápido para los modelos Llama2 con 13B parámetros. Además, se prevé que supere a H100 en una media del 50% en inferencia y del 60% en eficiencia energética para los modelos de lenguaje de gran tamaño (LLM) Llama 7B, 70B y Falcon 180B.

Intel Gaudi 3 proporciona software abierto basado en la comunidad y redes Ethernet estándar del sector. Además, permite a las empresas escalar con flexibilidad desde un único nodo hasta clústeres, superclústeres y megaclústeres con miles de nodos, dando soporte a la inferencia, el ajuste fino y la formación a la mayor escala.

Generación de valor para los clientes con las soluciones Intel AI
Intel presentó su estrategia para sistemas de IA abiertos y escalables, que incluye hardware, software, marcos y herramientas. El enfoque de Intel permite que un amplio ecosistema abierto de actores de la IA ofrezca soluciones que satisfagan las necesidades de GenAI específicas de las empresas. Esto incluye fabricantes de equipos, proveedores de bases de datos, integradores de sistemas, proveedores de software y servicios y más. También permite a las empresas utilizar las soluciones y los socios del ecosistema que ya conocen y en los que ya confían.

Intel compartió un amplio impulso con clientes empresariales de todos los sectores para desplegar las soluciones del acelerador Intel Gaudi para nuevas e innovadoras aplicaciones de IA generativa:

NAVER
NAVER ha confirmado la capacidad fundacional de Intel Gaudi en la ejecución de operaciones informáticas para modelos Transformer a gran escala con un rendimiento por vatio excepcional, para desarrollar el modelo LLM más potente para el despliegue de servicios avanzados de IA a nivel global, desde la nube hasta el dispositivo.

Bosch
Explora nuevas oportunidades para la fabricación inteligente, incluyendo modelos fundacionales, generando conjuntos de datos sintéticos de anomalías de fabricación para proporcionar conjuntos de entrenamiento robustos y uniformemente distribuidos para, por ejemplo, la inspección óptica automatizada.

IBM
Emplea procesadores Intel Xeon de 5ª generación para su almacén de datos watsonx.data y colabora estrechamente con Intel para validar la plataforma watsonx para los aceleradores Intel Gaudi.

El ecosistema se une para desarrollar una plataforma abierta de IA empresarial
En colaboración con SAP, Oracle y otros líderes del sector, Intel ha anunciado su intención de crear una plataforma abierta para la IA empresarial. El esfuerzo de todo el sector tiene como objetivo desarrollar sistemas GenAI abiertos y multiproveedor que ofrezcan la mejor facilidad de despliegue, rendimiento y valor de su clase, habilitados por la generación aumentada por recuperación (RAG).

RAG incorpora datos estructurados y no estructurados procedentes de fuentes fiables fuera de un modelo, lo que mejora la precisión y fiabilidad de GenAI al tiempo que preserva la seguridad de los datos de propiedad.

Como pasos iniciales en este esfuerzo, Intel lanzará implementaciones de referencia para canalizaciones GenAI, publicará un marco conceptual técnico y continuará añadiendo capacidad de infraestructura en Intel Developer Cloud para el desarrollo del ecosistema y la validación de RAG y futuras canalizaciones. Intel exhorta a una mayor participación del ecosistema para unir fuerzas en este esfuerzo abierto para facilitar la adopción empresarial y los resultados de negocio.

DEJA UNA RESPUESTA

Por favor introduce tu comentario
Por favor introduce tus comentarios