Soluciones Hadoop para Big Data

Supermicro y soluciones de Cloudera

El desafío

Existe una enorme cantidad de información generada por aplicaciones en constante evolución, desde datos estructurados y no estructurados hasta datos semiestructurados. La infraestructura de TI convencional no está diseñada para manejar la variedad, la velocidad y el volumen de datos producidos por redes sociales, aplicaciones móviles, sensores de máquinas e investigaciones científicas, entre otros. Para las empresas, utilizar el análisis de big data ya no es una cuestión de cuándo, sino de cómo. Hadoop, diseñado para el almacenamiento y procesamiento rentable de grandes volúmenes de datos, nació para este propósito. Puede escalar linealmente hasta miles de servidores y petabytes de almacenamiento.

Cómo aprovechar la tecnología Hadoop y obtener una ventaja competitiva es una preocupación para casi todos los CIO corporativos. Para las empresas, cómo implementar la infraestructura Hadoop de manera eficiente significa ganar o perder en la gran batalla por la cuota de mercado. Las empresas que implementan soluciones Hadoop a menudo invierten una gran cantidad de recursos en la búsqueda de la mejor arquitectura y el proveedor de soluciones más capaz. Aquí es donde Supermicro viene a ayudar.

La solución

Presentando Supermicro Los clústeres Hadoop son una serie de soluciones optimizadas para big data que ofrecen alto rendimiento, alta fiabilidad y alta escalabilidad. Supermicro Las soluciones Hadoop son clústeres llave en mano totalmente integrados, optimizados y probados, con paquetes de soporte flexibles disponibles para satisfacer las necesidades específicas de cada cliente.

Supermicro Los clústeres Hadoop cuentan con servidores de computación y almacenamiento de alta densidad, de eficacia probada en la industria, equipados con componentes de primera línea seleccionados mediante un exhaustivo proceso de diseño, validación y pruebas. Las configuraciones certificadas simplifican el diseño y la implementación de una infraestructura de computación y almacenamiento de Big Data verdaderamente escalable que satisface las necesidades más exigentes de los entornos de TI y centros de datos empresariales.

Supermicro Ventaja

  • Diseñado desde cero con configuraciones óptimas de servidor y clúster que satisfacen una variedad de cargas de trabajo.
  • Soluciones probadas basadas en exhaustivas pruebas de laboratorio e implementaciones de producción a gran escala.
  • Consigue la mejor relación precio/rendimiento y la mejor relación precio/capacidad con las plataformas de servidores y almacenamiento líderes del sector.
  • Clústeres Hadoop llave en mano de extremo a extremo con hardware, software y soporte global totalmente integrados.
  • Arquitectura avanzada basada en las últimas tecnologías como las CPU SkyLake, SAS3, NVMe , unidades Optane 
  • Rendimiento de red mejorado y redundancia con opciones duales de 10 GbE / 25 GbE / 40 GbE / 100 GbE.
  • Las pruebas automatizadas de clúster completo garantizan la calidad de la compilación y el cronograma de entrega.

Clúster Hadoop totalmente integrado

Características y ventajas principales:

  • Configuraciones de clúster diseñadas específicamente y optimizadas para capacidad, computación o rendimiento de E/S.
  • Diseño de NameNode de alta disponibilidad sin un único punto de fallo
  • Amplias opciones de memoria diseñadas específicamente para Spark y otros cálculos en memoria de baja latencia.
  • Hyper - Plataformas de servidores escalables diseñadas para implementaciones extremadamente grandes.
  • Diseño de computación, almacenamiento y memoria de alta densidad para lograr la mejor eficiencia y el menor costo TCO
  • Opciones de conmutación de red flexibles con 1 o 2 conmutadores de 10G / 25G / 100G por rack.
  • Diseño de rack de 14U rentable, ideal para entornos de pruebas de prueba de concepto.
  • Diseño de rack estándar de 42U y opciones de PDU flexibles que se adaptan a cualquier entorno de centro de datos.
  • Eficiencia de nivel Titanio (96%+): Fuentes de alimentación redundantes con PMBus
  • Integrado con IPMI y el conjunto de herramientas de gestión fuera de banda (OOB) de SMC para la gestión automatizada del clúster.
  • Completamente integrado, totalmente configurado y totalmente probado con las distribuciones de Hadoop que usted elija.
  • Grupo de pruebas de prueba de concepto disponible para una experiencia de compra sin riesgos.
Supermicro Rack de solución de clúster Hadoop totalmente integrado
  • 1 o 2 módulos de 48 puertos 10G SFP+ / 10GBase-T / 25GbE
    1 o 2 conmutadores de 32 puertos 100GbE, 1 conmutador de 48 puertos, GbE
  • 1 nodo de gestión 1U UP Skylake 41xx / 51xx
  • 3 nodos de nombres DP de 1U Xeon Skylake 41xx / 51xx / 61xx
  • Nodos de datos optimizados 2U SSG, 2U BigTwin o 4U FatTwin con procesadores Skylake 41xx / 51xx / 61xx / 81xx, doble 10G / 25G / 40G por nodo, 2,5" y 3,5". HDD opciones
  • Rack estándar de 42U con PDUs con medición, opciones de personalización del rack disponibles.
  • El servicio de integración incluye pruebas y puesta a punto completa del clúster, actualización de BIOS y firmware, configuración de red, preinstalación de la distribución Hadoop de su elección y configuración completa del clúster.

Especificaciones técnicas del clúster Hadoop

 Alta capacidadE/S optimizadaComputación de alta densidadEquilibrado
SKU del modeloSRS-HCSG18-HADP-01SRS-IOBT32-HADP-01SRS-HDFT36-HADP-01SRS-BLSG37-HADP-01
Nodo de datosSSG-6029P-E1CR24LSYS-2029BT-HNRSYS-F629P3-RC0BSSG-6019P-ACR12L
Nodo de datos (cantidad)18323637
Factor de forma2U SuperStorage2U BigTwin4U FatTwin1U SuperStorage
2x SKL 4114 2P 10C/20T 2.2G 85W2x SKL 5118 4/2P 12C/24T 2.3G 105W2x SKL 6130 4/2P 16C/32T 2.1G 125W2x SKL 5118 4/2P 12C/24T 2.3G 105W
128 GB192 GB256 GB128 GB
24 bahías de 3,5"6 bahías de 2,5"8 bahías de 3,5"12 bahías de 3,5"
Unidad de datos total432448 ( NVMe )*288444
Núcleos totales3607681152888
Memoria total Opción Valor - 4608 GB2,3 TB6,144 TB9,2 TB4,7 TB
Almacenamiento total3,45 PB (8 TB)1,792 PB (4 TB)1,15 PB (4 TB)2,66 PB (6 TB)
Nodo de nombre3x 1U WIO3x 1U WIO3x 1U WIO3x 1U WIO
Interruptores1x 48PT 25GBase-T2x 32PT 40G1 puerto Gigabit Ethernet de 48 puertos1x 48PT10G SFP+
Armario (Ancho x Alto x Profundidad)42U
23,5 x 82,4 x 48
PDU2x 50A 208 PDU trifásica con medidor
*Añadir 8 unidades de 2,5" y 32 bahías JBOF = 256 NVMe

Especificaciones del servidor

SSG-6029P-E1CR24L
SSG-6029P-E1CR24L
  • Base de datos corporativa, procesamiento y almacenamiento de bases de datos, servidor empresarial, HPC, centro de datos, iSCSI SAN
  • Compatibilidad con doble socket P (LGA 3647): Intel® Xeon® Procesadores escalables; 3 UPI de hasta 10,4 GT/s
  • 24 ranuras DIMM; hasta 3 TB ECC 3DS LRDIMM o RDIMM DDR4 2400 MHz
  • 24 bahías para unidades SAS3/SATA3 de 3,5" con intercambio en caliente, 2 bahías para unidades de 2,5" con intercambio en caliente (traseras); SAS3 a través de Broadcom 3008 AOC
  • 2 ranuras PCI-E 3.0 x16 y 1 ranura PCI-E 3.0 x8
  • 1 puerto IPMI dedicado
  • 1 VGA, 1 COM, 2 USB 3.0, 1 Tipo A
  • 5 ventiladores de refrigeración PWM redundantes de 80 mm con intercambio en caliente
  • Fuentes de alimentación redundantes de 1600 W con nivel de titanio (96 %)
SYS-2029BT-HNR
SYS-2029BT-HNR
  • 4 nodos DP en 2U; profundidad 28,5", Cada nodo:
  • Compatibilidad con doble socket P (LGA 3647): Intel® Xeon® Procesadores escalables; UPI dual de hasta 10,4 GT/s
  • 24 DIMM; hasta 3 TB ECC 3DS LRDIMM o RDIMM DDR4-2666MHz
  • 6 de 2,5" con intercambio en caliente NVMe bahías de unidades por nodo
  • 2 ranuras PCI-E 3.0 x16 de perfil bajo, 1 soporte para tarjeta de red SIOM
  • 1 puerto IPMI dedicado, 1 VGA, 2 USB 3.0, 1 SuperDOM
  • 4 ventiladores de alta resistencia de 80 mm con control óptimo de velocidad.
  • Fuentes de alimentación redundantes de 2200 W con nivel de titanio (96 %)
SYS-F629P3-RC0B
SYS-F629P3-RC0B
  • Servidor FatTwin™; CADA NODO (4 nodos del sistema de conexión en caliente):
  • Compatibilidad con doble socket P (LGA 3647): Intel® Xeon® Procesadores escalables; UPI dual de hasta 10,4 GT/s
  • 12 DIMM; hasta 1,5 TB ECC 3DS LRDIMM, hasta DDR4-2666 MHz.
  • 8x SAS3 de 3,5" o 6 SAS3 + 2 opcionales. NVMe U.2; SAS3 con Broadcom 3008
  • 1 PCI-E 3.0 x16 (LP), 1 PCI-E 3.0 x16 (SIOM: opción de red flexible)
  • 1 puerto IPMI dedicado, 1 VGA, 2 USB 3.0, 1 soporte M.2
  • 2 ventiladores centrales de 8 cm y 14.000 RPM
  • Fuentes de alimentación redundantes de 1200 W con nivel de titanio (96 %)
SSG-6019P-ACR12L
SSG-6019P-ACR12L
  • Almacenamiento de alta densidad, almacenamiento de objetos 1U, Ceph/Hadoop, almacenamiento escalable, análisis de big data.
  • Compatibilidad con doble socket P (LGA 3647): Intel® de 2.ª generación. Xeon® Procesadores escalables; UPI dual de hasta 10,4 GT/s
  • 12 bahías para unidades SAS3/SATA3 de 3,5" de intercambio en caliente, 4 bahías para unidades de 2,5" de intercambio en caliente NVMe / SATA bahías de unidades
  • 12 DIMM; hasta 3 TB 3DS ECC DDR4-2933 MHz RDIMM/LRDIMM
  • Compatible con Intel® Optane™ DCPMM*
  • 2 ranuras PCI-E 3.0 x16, 1 ranura PCI-E 3.0 x8
  • 2 puertos 10GBase-T a través de Intel C622, 1 puerto IPMI dedicado
  • 1 VGA, 4 USB 3.0, 1 conector TPM
  • 6 ventiladores de refrigeración de 4 cm y 20.500 RPM
  • Fuentes de alimentación redundantes de nivel platino de 600 W

*Póngase en contacto con su Supermicro Para más información, contacte con nuestro representante de ventas.

Conmutadores Ethernet de 1 Gb y 10 Gb
Conmutadores Ethernet de 1 Gb y 10 Gb
  • Conmutación Ethernet de capa 2/3, agregación de enlaces (LACP), tramas Jumbo, compatibilidad con VLAN
  • Flexibilidad de configuración:
    • SSE-G24-TG4 : 24 puertos Ethernet RJ45 de 1 Gbps con 4 puertos SFP Combo, 4 puertos Ethernet de 10 Gbps (CX4, XFP o SFP+), apilable.
    • SSE-G48-TG4 : 48 puertos Ethernet RJ45 de 1 Gbps con 4 puertos SFP Combo, 4 puertos Ethernet de 10 Gbps (CX4, XFP o SFP+), apilable.
    • SSE-X24S / SSE-X3348S(R) - 24 puertos Ethernet de 10 Gbps (SFP+), opción de flujo de aire inverso
  • Gestión: Interfaz de gestión basada en web, CLI estándar del sector con telnet SSH o puerto de gestión local, secuencias de comandos, registro
  • Enrutamiento, Multidifusión:
    • Calidad de servicio y DiffServ : 8 colas de prioridad por puerto; WRR ajustado y programación de prioridad estricta.
    • Seguridad : autenticación basada en puerto 802.1x, autenticación RADIUS y TACACS+, cifrado SSH/SSL.
  • Dimensiones: 17,3" ancho x 15,2" fondo x 1,7" alto (440 mm x 386 mm x 43 mm)
SSE-C3632S
SSE-C3632S

/ SSE-C3632SR (32 puertos)

  • 32 puertos Ethernet de cien gigabits
    (Cada uno se puede configurar opcionalmente para cuarenta gigabits o 4 x veinticinco gigabits)
  • Enrutamiento de capa 3 a velocidad de cable
  • 1:1 Conectividad sin bloqueo
  • diseño 1U para una instalación flexible
  • Apto para centros de datos: modelos de flujo de aire normal e inverso
  • Fuentes de alimentación redundantes conectables en caliente
  • Metal desnudo - ONIE instalado
  • Cúmulo Linux Capaz
Gestión de servidores IPMI
Gestión de servidores IPMI
  • Alertas de fallo HW - E-mail o SNMP
  • Acceso redundante para la gestión
  • Compatibilidad con estándares abiertos (SMASH 2.0, LDAP, WSMAN)
  • Compatibilidad con VLAN
  • KVM y Virtual Media y SOL (sin necesidad de licencia adicional)
  • Fácil mantenimiento (herramientas flash de línea de comandos para actualización de firmware)

Servicios de laboratorio de integración y prueba de concepto de Supermicro

Ver detalles

Otros recursos