Almacenamiento definido por software de alto rendimiento para cargas de trabajo de IA

IBM Storage Scale Erasure Code Edition (ECE) es una solución de almacenamiento definida por software con un sistema de archivos paralelo de alto rendimiento (GPFS). Se ha validado que funciona con Supermicro Los servidores de almacenamiento Petascale de ofrecerán capacidad a escala de exabytes. ultra -Baja latencia, E/S paralela y arquitecturas por niveles para soportar de manera eficiente las cargas de trabajo de entrenamiento e inferencia de IA. Puede permitir el intercambio de datos sin problemas entre Supermicro Nodos de petaescala, que proporcionan una plataforma optimizada en costes, escalable y resiliente para la IA. Con una gestión de datos basada en políticas, clasifica automáticamente los datos en varios medios de almacenamiento dentro de Supermicro El sistema de almacenamiento Petascale de IBM optimiza el rendimiento y reduce los costos. Esto convierte a IBM Scale ECE en la solución ideal para organizaciones que buscan la elasticidad y la capacidad de gestión del almacenamiento definido por software, junto con las características de rendimiento de los sistemas de archivos de clase empresarial.

Maximiza la utilización de la GPU y elimina los cuellos de botella.

IBM Storage Scale ofrece un rendimiento de sistema de archivos paralelo que minimiza el tiempo de inactividad de la GPU causado por cuellos de botella de almacenamiento durante las cargas de trabajo de entrenamiento e inferencia de IA. Cuando se implementa en Supermicro Para servidores de petaescala, la solución proporciona la infraestructura de alto rendimiento y baja latencia necesaria para que las costosas GPU funcionen con la máxima eficiencia. Para los equipos de IA y HPC, las capacidades de aceleración de la plataforma son especialmente valiosas para reducir las horas de GPU desperdiciadas debido a las esperas de E/S de almacenamiento.

Acelere los flujos de trabajo de IA con la estratificación inteligente.

IBM Storage Scale en Supermicro Los servidores Petascale admiten la estratificación multi-flash con NVMe Las unidades TLC y QLC permiten a las organizaciones alinear el costo, el rendimiento y la durabilidad con perfiles de carga de trabajo específicos. Para la inferencia de IA, IBM Storage Scale permite compartir la caché KV entre miles de servidores GPU, lo que proporciona una aceleración de hasta 50 veces en el tiempo hasta el primer token para modelos de lenguaje grandes en comparación con el recálculo.

Unifique los datos en entornos distribuidos.

IBM Storage Scale proporciona un único espacio de nombres global que permite que todos los servidores GPU accedan a los mismos conjuntos de datos simultáneamente, eliminando los problemas de copia de datos y control de versiones en equipos de IA distribuidos. Cuando se implementa en Supermicro Gracias a sus servidores de almacenamiento Petascale, esta arquitectura desagregada permite escalar de forma independiente los recursos de computación y almacenamiento en función de las demandas de la carga de trabajo.
  • Ingesta de datos de IA y entrenamiento de modelos de IA
  • Ajuste de modelos de IA e inferencia de IA
  • Computación de alto rendimiento (HPC)
  • Investigación e ingeniería intensivas en datos
  • Plataforma de escalabilidad de almacenamiento de IBM
    1. Acceso de alto rendimiento a archivos, objetos y datos vectoriales
      (POSIX, GPUDirect, Container CSI, S3, SMB, NFS, HDFS)
    2. Gestión y transformación seguras de datos
      (Posicionamiento, movimiento y vectorización automatizados)
    3. Clasificación por niveles integrada y sin interrupciones
      ( NVMe , SSD , NL- SAS , Cinta)
      Almacenamiento en caché integrado y sin interrupciones
      (Acelerar la transferencia remota de archivos y objetos)
Supermicro Servidor de almacenamiento a escala peta para IBM Storage Scale Code Edition
Supermicro Servidor de almacenamiento a escala peta

Productos destacados

Supermicro Servidor de almacenamiento Petascale E3.S de 1U para la solución IBM Storage Scale ECE.

Servidor de almacenamiento E3.S Petascale 1U

ASG-1115S-NE316R
Más información
Recursos