Soluciones Hadoop para Big Data

Supermicro y soluciones de Cloudera

El desafío

Existe una enorme cantidad de información generada por aplicaciones en constante evolución, desde datos estructurados y no estructurados hasta datos semiestructurados. La infraestructura de TI convencional no está diseñada para manejar la variedad, la velocidad y el volumen de datos producidos por redes sociales, aplicaciones móviles, sensores de máquinas e investigaciones científicas, entre otros. Para las empresas, utilizar el análisis de big data ya no es una cuestión de cuándo, sino de cómo. Hadoop, diseñado para el almacenamiento y procesamiento rentable de grandes volúmenes de datos, nació para este propósito. Puede escalar linealmente hasta miles de servidores y petabytes de almacenamiento.

Cómo aprovechar la tecnología Hadoop y obtener una ventaja competitiva es una preocupación para casi todos los CIO corporativos. Para las empresas, cómo implementar la infraestructura Hadoop de manera eficiente significa ganar o perder en la gran batalla por la cuota de mercado. Las empresas que implementan soluciones Hadoop a menudo invierten una gran cantidad de recursos en la búsqueda de la mejor arquitectura y el proveedor de soluciones más capaz. Aquí es donde Supermicro viene a ayudar.

La solución

Presentando Supermicro Los clústeres Hadoop son una serie de soluciones optimizadas para big data que ofrecen alto rendimiento, alta fiabilidad y alta escalabilidad. Supermicro Las soluciones Hadoop son clústeres llave en mano totalmente integrados, optimizados y probados, con paquetes de soporte flexibles disponibles para satisfacer las necesidades específicas de cada cliente.

Supermicro Los clústeres Hadoop cuentan con servidores de computación y almacenamiento de alta densidad, de eficacia probada en la industria, equipados con componentes de primera línea seleccionados mediante un exhaustivo proceso de diseño, validación y pruebas. Las configuraciones certificadas simplifican el diseño y la implementación de una infraestructura de computación y almacenamiento de Big Data verdaderamente escalable que satisface las necesidades más exigentes de los entornos de TI y centros de datos empresariales.

Supermicro Ventaja

  • Diseñado desde cero con configuraciones óptimas de servidor y clúster que satisfacen una variedad de cargas de trabajo.
  • Soluciones probadas basadas en exhaustivas pruebas de laboratorio e implementaciones de producción a gran escala.
  • Consigue la mejor relación precio/rendimiento y la mejor relación precio/capacidad con las plataformas de servidores y almacenamiento líderes del sector.
  • Clústeres Hadoop llave en mano de extremo a extremo con hardware, software y soporte global totalmente integrados.
  • Arquitectura avanzada basada en las últimas tecnologías como las CPU SkyLake, SAS3, NVMe , unidades Optane 
  • Rendimiento de red mejorado y redundancia con opciones duales de 10 GbE / 25 GbE / 40 GbE / 100 GbE.
  • Las pruebas automatizadas de clúster completo garantizan la calidad de la compilación y el cronograma de entrega.

Clúster Hadoop totalmente integrado

Características y ventajas principales:

  • Configuraciones de clúster diseñadas específicamente y optimizadas para capacidad, computación o rendimiento de E/S.
  • Diseño de NameNode de alta disponibilidad sin un único punto de fallo
  • Amplias opciones de memoria diseñadas específicamente para Spark y otros cálculos en memoria de baja latencia.
  • Hyper - Plataformas de servidores escalables diseñadas para implementaciones extremadamente grandes.
  • Diseño de computación, almacenamiento y memoria de alta densidad para lograr la mejor eficiencia y el menor costo TCO
  • Opciones de conmutación de red flexibles con 1 o 2 conmutadores de 10G / 25G / 100G por rack.
  • Diseño de rack de 14U rentable, ideal para entornos de pruebas de prueba de concepto.
  • Diseño de rack estándar de 42U y opciones de PDU flexibles que se adaptan a cualquier entorno de centro de datos.
  • Eficiencia de nivel Titanio (96%+): Fuentes de alimentación redundantes con PMBus
  • Integrado con IPMI y el conjunto de herramientas de gestión fuera de banda (OOB) de SMC para la gestión automatizada del clúster.
  • Completamente integrado, totalmente configurado y totalmente probado con las distribuciones de Hadoop que usted elija.
  • Grupo de pruebas de prueba de concepto disponible para una experiencia de compra sin riesgos.
Supermicro Rack de solución de clúster Hadoop totalmente integrado
  • 1 o 2 módulos de 48 puertos 10G SFP+ / 10GBase-T / 25GbE
    1 o 2 conmutadores de 32 puertos 100GbE, 1 conmutador de 48 puertos, GbE
  • 1 nodo de gestión 1U UP Skylake 41xx / 51xx
  • 3 nodos de nombres DP de 1U Xeon Skylake 41xx / 51xx / 61xx
  • Nodos de datos optimizados 2U SSG, 2U BigTwin o 4U FatTwin con procesadores Skylake 41xx / 51xx / 61xx / 81xx, doble 10G / 25G / 40G por nodo, 2,5" y 3,5". HDD opciones
  • Rack estándar de 42U con PDUs con medición, opciones de personalización del rack disponibles.
  • El servicio de integración incluye pruebas y puesta a punto completa del clúster, actualización de BIOS y firmware, configuración de red, preinstalación de la distribución Hadoop de su elección y configuración completa del clúster.

Especificaciones técnicas del clúster Hadoop

 Alta capacidadE/S optimizadaComputación de alta densidadEquilibrado
SKU del modeloSRS-HCSG18-HADP-01SRS-IOBT32-HADP-01SRS-HDFT36-HADP-01SRS-BLSG37-HADP-01
Nodo de datosSSG-6029P-E1CR24LSYS-2029BT-HNRSYS-F629P3-RC0BSSG-6019P-ACR12L
Nodo de datos (cantidad)18323637
Factor de forma2U SuperStorage2U BigTwin4U FatTwin1U SuperStorage
2x SKL 4114 2P 10C/20T 2.2G 85W2x SKL 5118 4/2P 12C/24T 2.3G 105W2x SKL 6130 4/2P 16C/32T 2.1G 125W2x SKL 5118 4/2P 12C/24T 2.3G 105W
128 GB192 GB256 GB128 GB
24 bahías de 3,5"6 bahías de 2,5"8 bahías de 3,5"12 bahías de 3,5"
Unidad de datos total432448 ( NVMe )*288444
Núcleos totales3607681152888
Memoria total Opción Valor - 4608 GB2,3 TB6,144 TB9,2 TB4,7 TB
Almacenamiento total3,45 PB (8 TB)1,792 PB (4 TB)1,15 PB (4 TB)2,66 PB (6 TB)
Nodo de nombre3x 1U WIO3x 1U WIO3x 1U WIO3x 1U WIO
Interruptores1x 48PT 25GBase-T2x 32PT 40G1 puerto Gigabit Ethernet de 48 puertos1x 48PT10G SFP+
Armario (Ancho x Alto x Profundidad)42U
23,5 x 82,4 x 48
PDU2x 50A 208 PDU trifásica con medidor
*Añadir 8 unidades de 2,5" y 32 bahías JBOF = 256 NVMe

Especificaciones del servidor

SSG-6029P-E1CR24L
SSG-6029P-E1CR24L
  • Corporate Database, Database Processing & Storage, Enterprise Server, HPC, Data Center, iSCSI SAN
  • Dual Socket P (LGA 3647) support: Intel® Xeon® Scalable processors; 3 UPI up to 10.4GT/s
  • 24 DIMM slots; up to 3TB ECC 3DS LRDIMM or RDIMM DDR4 2400MHz
  • 24 Hot-swap 3.5" SAS3/SATA3 drive bays, 2 Hot-swap 2.5" drive bays (rear); SAS3 via Broadcom 3008 AOC
  • 2 PCI-E 3.0 x16 and 1 PCI-E 3.0 x8 slots
  • 1 Dedicated IPMI port
  • 1 VGA, 1 COM, 2 USB 3.0, 1 Type A
  • 5 Hot-swap 80mm redundant PWM cooling fans
  • 1600W Redundant Titanium Level (96%) Power Supplies
SYS-2029BT-HNR
SYS-2029BT-HNR
  • 4 DP nodes in 2U; depth 28.5", Each Node:
  • Dual Socket P (LGA 3647) support: Intel® Xeon® Scalable processors; dual UPI up to 10.4GT/s
  • 24 DIMMs; up to 3TB ECC 3DS LRDIMM or RDIMM DDR4‑2666MHz
  • 6 Hot-swap 2.5" NVMe drive bays per node
  • 2 PCI-E 3.0 x16 Low-profile slots, 1 Networking SIOM card support
  • 1 Dedicated IPMI port, 1 VGA, 2 USB 3.0, 1 SuperDOM
  • 4 heavy duty 80mm fans w/ optimal fan speed control
  • 2200W Redundant Titanium Level (96%) Power Supplies
SYS-F629P3-RC0B
SYS-F629P3-RC0B
  • FatTwin™ Server; EACH NODE (x4 Hot-plug System Nodes):
  • Dual Socket P (LGA 3647) support: Intel® Xeon® Scalable processors; dual UPI up to 10.4GT/s
  • 12 DIMMs; up to 1.5TB ECC 3DS LRDIMM, up to DDR4‑2666MHz
  • 8x 3.5" SAS3 or 6 SAS3 + 2 opt. NVMe U.2; SAS3 with Broadcom 3008
  • 1 PCI-E 3.0 x16 (LP), 1 PCI-E 3.0 x16 (SIOM: flexible network opt.)
  • 1 Dedicated IPMI port, 1 VGA, 2 USB 3.0, 1 M.2 support
  • 2x 8cm 14k RPM middle fans
  • 1200W Redundant Titanium Level (96%) Power Supplies
SSG-6019P-ACR12L
SSG-6019P-ACR12L
  • High Density Storage, Object Storage 1U, Ceph / Hadoop, Scale-out Storage, Big Data Analytics
  • Dual Socket P (LGA 3647) support: 2nd Gen. Intel® Xeon® Scalable processors; dual UPI up to 10.4GT/s
  • 12 Hot-swap 3.5" SAS3/SATA3 drive bays, 4 Hot-swap 2.5" NVMe/SATA drive bays
  • 12 DIMMs; up to 3TB 3DS ECC DDR4-2933 MHz RDIMM/LRDIMM
  • Supports Intel® Optane™ DCPMM*
  • 2 PCI-E 3.0 x16, 1 PCI-E 3.0 x8
  • 2x 10GBase-T ports via Intel C622, 1 Dedicated IPMI port
  • 1 VGA, 4 USB 3.0, 1 TPM header
  • 6x 4cm 20.5K RPM cooling fans
  • 600W Redundant Platinum Level Power Supplies

*Contact your Supermicro sales rep for more info.

Conmutadores Ethernet de 1 Gb y 10 Gb
Conmutadores Ethernet de 1 Gb y 10 Gb
  • Layer 2/3 Ethernet Switching, link aggregation (LACP), Jumbo frames, VLAN support
  • Configuration Flexibility:
    • SSE-G24-TG4 - 24 ports of RJ45 1Gbps Ethernet with 4 SFP Combo ports, 4 ports 10Gbps Ethernet (CX4, XFP, or SFP+), Stacking
    • SSE-G48-TG4 - 48 ports of RJ45 1Gbps Ethernet with 4 SFP Combo ports, 4 ports 10Gbps Ethernet (CX4, XFP, or SFP+), Stacking
    • SSE-X24S / SSE-X3348S(R) - 24 ports 10Gbps Ethernet (SFP+), Reverse airflow option
  • Management: Web-based management interface, Industry standard CLI with telnet SSH or local management port, Scripting, Logging
  • Routing, Multicast:
    • Quality of service and DiffServ - 8 priority queues per port; Adjusted WRR and Strict Priority Scheduling
    • Security - 802.1x port based authentication, RADIUS and TACACS+ authentication, SSH / SSL encryption
  • Dimensions: 17.3"W x 15.2"D x 1.7"H (440mm x 386mm x 43mm)
SSE-C3632S
SSE-C3632S

/ SSE-C3632SR (32 ports)

  • 32x One-Hundred-Gigabit Ethernet ports
    (Each optionally configured for forty-gigabit or 4x twenty-five gigabit)
  • Wire-speed Layer 3 Routing
  • 1:1 Non-blocking connectivity
  • 1U form factor for flexible installation
  • Data-Center friendly - regular and reverse airflow models
  • Redundant hot-pluggable power supplies
  • Bare metal - ONIE Installed
  • Cumulus Linux Capable
Gestión de servidores IPMI
Gestión de servidores IPMI
  • HW fault alerts - E-mail or SNMP
  • Redundant access for management
  • Support for open standards (SMASH 2.0, LDAP, WSMAN)
  • VLAN support
  • KVM and Virtual Media and SOL (no additional license needed)
  • Easy maintenance (Command line flash tools for firmware update)

Servicios de laboratorio de integración y prueba de concepto de Supermicro

Ver detalles

Otros recursos