Jueves 5 de noviembre de 2026 ·

Supermicro, IBM y NVIDIA lanzan una solución de caché KV para acelerar la inferencia de IA

Útil para CTO y tecnología 60%Programadores 50%

Supermicro presentó con IBM y NVIDIA un nuevo sistema de almacenamiento de caché KV que combina sus servidores Petascale de todo flash con AMD EPYC 9005, el software IBM Storage Scale, el framework de inferencia NVIDIA Dynamo y las redes Spectrum-X Ethernet. Según las pruebas, reduce el tiempo hasta el primer token en contextos largos frente a un sistema sin caché KV. La solución amplía la capacidad de caché más allá de la memoria de las GPU, lo que sube su uso y el rendimiento de la inferencia.

Qué significa

Las empresas que ejecutan modelos con contextos largos o agentes de IA podrían obtener respuestas más rápidas y aprovechar mejor sus GPU, porque los cálculos ya hechos se guardan en almacenamiento y no se repiten.

Fuentes originales

Resumen de Hoy en IA. Pulsa una fuente para leer la noticia completa en su idioma original.

También ese día

Todas las noticias de IA del jueves 5 de noviembre de 2026 ->