Spark, Hadoop, Data Streaming, Soluciones de ingeniería de datos para IA

Soluciones Supermicro Cloudera

El desafío

Existe una enorme cantidad de información impulsada por las aplicaciones en constante cambio, desde datos estructurados y no estructurados hasta semiestructurados. La infraestructura de TI convencional no está hecha para manejar la variedad, la velocidad y el volumen de los datos producidos por las redes de medios sociales, las aplicaciones móviles, los sensores de las máquinas y las investigaciones científicas, etc. Para las empresas, utilizar la analítica de grandes datos ya no es una cuestión de cuándo, sino de cómo. Spark, Hadoop y otros programas de código abierto, diseñados para el almacenamiento y procesamiento rentables de grandes volúmenes de datos, han nacido con este propósito. Puede escalar linealmente hasta miles de servidores y petabytes de almacenamiento.

Cloudera integra estas tecnologías de código abierto y proporciona asistencia de nivel empresarial para ayudar a los clientes a obtener una ventaja competitiva a partir de la gran cantidad de datos. Para ello, Cloudera se implementa en clústeres de servidores escalables. Supermicro la implementación de clústeres Cloudera con sistemas fiables que cuentan con gestión tanto en banda como fuera de banda y ofreciendo una amplia selección de plataformas de sistemas que se adaptan a los centros de datos de los clientes.

La solución y Supermicro

Los clústeres Supermicro son compatibles con Cloudera Cloud Data Platform (CDP) y ofrecen una implementación simplificada.

• ELECCIÓN DEL SISTEMA: Los clientes pueden elegir la mejor plataforma de hardware para construir clusters
  • Sistemas Hyper de montaje en bastidor o servidores Twin multinodo, o servidores Blade
  • Elección de arquitecturas de CPU, ya sean CPU empresariales Intel o AMD
  • Elección de aceleradores de GPU para aplicaciones como la aceleración de Spark
  • Elección de discos desde HDD a SSD o unidades NVMe
  • Elección de arquitecturas de red, opciones de 10 GbE a 400 GbE
  • Todo gestionado por las mismas interfaces IPMI/Redfish, y se puede agregar mediante el panel único Supermicro Composer.
  • Gran parte de la implementación se puede automatizar utilizando Supermicro Cloud Orchestrator.
• ELECCIÓN DE IMPLEMENTACIÓN: Los clientes pueden implementar en bare-metal, Red Hat OpenShift, Kubernetes o en máquinas virtuales.
• ESCALABILIDAD: Los clientes pueden empezar con el cluster más pequeño y escalar añadiendo servidores.
• AUTOMATIZACIÓN: Supermicro construir el clúster, totalmente probado con calidad de construcción garantizada y calendario de entrega. La implementación del software se puede desplegar utilizando las funciones de automatización de Supermicro Orchestrator.