Aller au contenu principal

Solutions Hadoop pour le Big Data

Solutions Supermicro Cloudera

Le défi

Les applications en constante évolution génèrent une énorme quantité d'informations, qu'il s'agisse de données structurées, non structurées ou semi-structurées. L'infrastructure informatique conventionnelle n'est pas conçue pour gérer la variété, la vitesse et le volume des données produites par les réseaux de médias sociaux, les applications mobiles, les capteurs de machines et les recherches scientifiques, etc. Pour les entreprises, l'utilisation de l'analyse des big data n'est plus une question de temps, c'est une question de moyens. Hadoop, conçu pour le stockage et le traitement rentables de grands volumes de données, est né pour cela. Il peut évoluer linéairement jusqu'à des milliers de serveurs et des pétaoctets de stockage.

Presque tous les directeurs informatiques d'entreprise cherchent à tirer parti de la technologie Hadoop pour acquérir un avantage concurrentiel. Pour les entreprises, le déploiement efficace de l'infrastructure Hadoop est synonyme de victoire ou de défaite dans la grande bataille pour les parts de marché. Les entreprises qui déploient des solutions Hadoop consacrent souvent d'importantes ressources à la recherche de la meilleure architecture et du fournisseur de solutions le plus compétent. C'est là que Supermicro pour les aider.

La solution

Présentation des clusters Supermicro , une série de solutions optimisées pour le Big Data qui offrent des performances élevées, une grande fiabilité et une évolutivité exceptionnelle. Les solutions Supermicro sont des clusters clés en main entièrement intégrés, optimisés et testés, accompagnés de packs d'assistance flexibles pour répondre aux besoins spécifiques des clients.

Les clusters Supermicro sont équipés de serveurs de calcul et de stockage haute densité éprouvés dans l'industrie, dotés des meilleurs composants sélectionnés à l'issue d'une conception technique, d'une validation et de tests approfondis. Les configurations certifiées éliminent les incertitudes liées à la conception et au déploiement d'une infrastructure de calcul et de stockage Big Data véritablement évolutive, qui répond aux environnements informatiques et de centres de données les plus exigeants.

Supermicro

  • Conçu dès le départ avec des configurations optimales de serveurs et de clusters qui répondent à une grande variété de charges de travail.
  • Des solutions éprouvées basées sur des tests en laboratoire et des déploiements de production à grande échelle.
  • Obtenir le meilleur rapport prix/performance et le meilleur rapport prix/capacité avec les plateformes de serveurs et de stockage les plus performantes du secteur
  • Clusters Hadoop clés en main de bout en bout avec matériel, logiciel et support mondial entièrement intégrés
  • Architecture avancée basée sur les dernières technologies telles que les CPU SkyLake, SAS3, NVMe, Optane Drives 
  • Performances réseau et redondance accrues grâce aux options doubles 10GbE / 25GbE / 40GbE / 100GbE
  • Des tests automatisés en grappe complète garantissent la qualité de la construction et le respect du calendrier de livraison.

Cluster Hadoop entièrement intégré

Principales caractéristiques et avantages :

  • Configurations de clusters spécifiques optimisées pour la capacité, le calcul ou la performance IO
  • Conception de nœuds de nom à haute disponibilité, sans point de défaillance unique
  • Grandes options de mémoire conçues spécifiquement pour Spark et d'autres calculs en mémoire et à faible latence
  • Plateformes de serveurs Hyper conçues pour les déploiements de très grande envergure
  • Conception à haute densité de calcul, de stockage et de mémoire pour obtenir la meilleure efficacité et le coût total de possession le plus bas.
  • Options de commutation réseau flexibles avec 1 ou 2 commutateurs 10G / 25G / 100G par rack.
  • Conception rentable en rack 14U, idéale pour un environnement de test de validation du concept
  • Conception de rack standard 42U et options PDU flexibles pour répondre à tous les environnements de centres de données
  • Efficacité jusqu'au niveau Titanium (96%+) - Alimentations redondantes avec PMBus
  • Intégrée avec IPMI et la suite SMC OOB (out of band management) pour une gestion automatisée des clusters.
  • Entièrement intégré, entièrement configuré et entièrement testé avec les distributions Hadoop de votre choix
  • La grappe d'essai de la preuve de concept est disponible pour une expérience d'achat sans risque.
Rack de solution de cluster Hadoop Supermicro intégré Supermicro
  • 1 ou 2x 48 ports 10G SFP+ / 10GBase-T / 25GbE
    1 ou 2x 32 ports 100GbE, 1x 48 ports Switch, GbE
  • 1x Management Node 1U UP Skylake 41xx / 51xx
  • 3x Name Nodes 1U DP Xeon Skylake 41xx / 51xx / 61xx
  • Nœuds de données optimisés 2U SSG, 2U BigTwin ou 4U FatTwin avec processeurs Skylake 41xx / 51xx / 61xx / 81xx, double 10G / 25G / 40G par nœud, options de disques durs 2,5" et 3,5
  • Rack standard 42U avec PDU mesurées, options de personnalisation du rack disponibles
  • Le service d'intégration comprend le rodage et le test complet du cluster, la mise à jour du BIOS et du FW, la configuration du réseau, la pré-installation de la distribution Hadoop de votre choix et le cluster complet.

Spécifications techniques du cluster Hadoop

 Grande capacitéOptimisation des OICalcul haute densitéÉquilibré
Modèle SKUSRS-HCSG18-HADP-01SRS-IOBT32-HADP-01SRS-HDFT36-HADP-01SRS-BLSG37-HADP-01
Nœud de données24SYS-2029BT-HNRSYS-F629P3-RC0BSSG-6019P-ACR12L
Nœud de données (Qté)18323637
Facteur de formeSuperStorage 2U2U BigTwin4U FatTwin1U SuperStorage
2x SKL 4114 2P 10C/20T 2.2G 85W2x SKL 5118 4/2P 12C/24T 2.3G 105W2x SKL 6130 4/2P 16C/32T 2.1G 125W2x SKL 5118 4/2P 12C/24T 2.3G 105W
128192256128
24 baies 3,5"6 baies 2,5"8 Baie 3.5"12 baies 3,5"
Nombre total de lecteurs de données432448 (NVMe)*288444
Total des noyaux3607681152888
Mémoire totale2.36.1449.24.7
Stockage total3,45PB (8TB)1,792PB (4TB)1,15PB (4TB)2,66PB (6TB)
Nom Nœud3x 1U WIO3x 1U WIO3x 1U WIO3x 1U WIO
Switches 1x 48PT 25GBase-T2x 32PT 40G1x 48PT GbE1x 48PT10G SFP+
Armoire (L x H x P)42U
23,5 x 82,4 x 48
PDU2x 50A 208 3-Phase Metered PDU
*ADD 32 Bay 2.5" Drives x8 JBOF = 256 NVMe

Spécifications du serveur

  • Base de données d'entreprise, Traitement et stockage des bases de données, Serveur d'entreprise, HPC, Centre de données, iSCSI SAN
  • Prise en charge de deux sockets P (LGA 3647) : Processeurs Intel® Xeon® Scalable ; 3 UPI jusqu'à 10.4GT/s
  • 24 emplacements DIMM ; jusqu'à 3 To ECC 3DS LRDIMM ou RDIMM DDR4 2400MHz
  • 24 baies de lecteur SAS3/SATA3 3,5" interchangeables à chaud, 2 baies de lecteur 2,5" interchangeables à chaud (arrière) ; SAS3 via Broadcom 3008 AOC
  • 2 emplacements PCI-E 3.0 x16 et 1 emplacement PCI-E 3.0 x8
  • 1 Port IPMI dédié
  • 1 VGA, 1 COM, 2 USB 3.0, 1 Type A
  • 5 ventilateurs de refroidissement PWM redondants de 80 mm permutables à chaud
  • Alimentations redondantes 1600W de niveau Titanium (96%)
  • 4 nœuds DP dans 2U ; profondeur 28.5", chaque nœud :
  • Prise en charge de deux sockets P (LGA 3647) : Processeurs Intel® Xeon® Scalable ; double UPI jusqu'à 10.4GT/s
  • 24 DIMM ; jusqu'à 3 To ECC 3DS LRDIMM ou RDIMM DDR4-2666MHz
  • 6 baies de disques NVMe 2,5" échangeables à chaud par nœud
  • 2 emplacements PCI-E 3.0 x16 Low-profile, 1 carte SIOM réseau
  • 1 port IPMI dédié, 1 VGA, 2 USB 3.0, 1 SuperDOM
  • 4 ventilateurs robustes de 80 mm avec contrôle optimal de la vitesse du ventilateur
  • Alimentations redondantes 2200W de niveau Titanium (96%)
  • Serveur FatTwin™ ; CHAQUE NODE (x4 nœuds de système branchés à chaud) :
  • Prise en charge de deux sockets P (LGA 3647) : Processeurs Intel® Xeon® Scalable ; double UPI jusqu'à 10.4GT/s
  • 12 DIMM ; jusqu'à 1,5 To ECC 3DS LRDIMM, jusqu'à DDR4-2666MHz
  • 8x 3,5" SAS3 ou 6 SAS3 + 2 opt. NVMe U.2 ; SAS3 avec Broadcom 3008
  • 1 PCI-E 3.0 x16 (LP), 1 PCI-E 3.0 x16 (SIOM : flexible network opt.)
  • 1 port IPMI dédié, 1 VGA, 2 USB 3.0, 1 support M.2
  • 2x 8cm 14k RPM ventilateurs centraux
  • Alimentations redondantes 1200W de niveau Titanium (96%)
  • Stockage haute densité, stockage d'objets 1U, Ceph / Hadoop, stockage évolutif, Big Data Analytics
  • Prise en charge de deux sockets P (LGA 3647) : Processeurs Intel® Xeon® Scalable de 2ème génération ; double UPI jusqu'à 10,4GT/s
  • 12 baies de lecteur SAS3/SATA3 3,5" interchangeables à chaud, 4 baies de lecteur NVMe/SATA 2,5" interchangeables à chaud
  • 12 DIMM ; jusqu'à 3 To 3DS ECC DDR4-2933 MHz RDIMM/LRDIMM
  • Prend en charge Intel® Optane™ DCPMM*.
  • 2 PCI-E 3.0 x16, 1 PCI-E 3.0 x8
  • 2 ports 10GBase-T via Intel C622, 1 port IPMI dédié
  • 1 VGA, 4 USB 3.0, 1 connecteur TPM
  • 6x 4cm 20.5K RPM ventilateurs de refroidissement
  • 600Alimentations redondantes de niveau platine

*Contactez votre représentant Supermicro pour plus d'informations.

  • Commutation Ethernet de couche 2/3, agrégation de liens (LACP), trames Jumbo, support VLAN
  • Flexibilité de la configuration :
    • SSE-G24-TG4 - 24 ports RJ45 1Gbps Ethernet avec 4 ports SFP Combo, 4 ports 10Gbps Ethernet (CX4, XFP, ou SFP+), Empilage
    • SSE-G48-TG4 - 48 ports RJ45 1Gbps Ethernet avec 4 ports SFP Combo, 4 ports 10Gbps Ethernet (CX4, XFP, ou SFP+), Empilage
    • SSE-X24S / SSE-X3348S(R) - 24 ports 10Gbps Ethernet (SFP+), option flux d'air inversé
  • Gestion : Interface de gestion basée sur le Web, CLI standard avec telnet SSH ou port de gestion local, script, journalisation.
  • Routage, multidiffusion :
    • Qualité de service et DiffServ - 8 files d'attente prioritaires par port ; WRR ajusté et ordonnancement strict des priorités
    • Sécurité - Authentification par port 802.1x, authentification RADIUS et TACACS+, cryptage SSH / SSL
  • Dimensions : 17,3 "W x 15,2 "D x 1,7 "H (440mm x 386mm x 43mm)
  • 32 ports Ethernet à cent gigabits
    (chacun configuré au choix pour quarante gigabits ou 4x vingt-cinq gigabits)
  • Routage de couche 3 à vitesse filaire
  • 1:1 Connectivité non bloquante
  • Facteur de forme 1U pour une installation flexible
  • Adapté aux centres de données - modèles à flux d'air normal et inversé
  • Alimentations redondantes connectables à chaud
  • Métal nu - ONIE installé
  • Cumulus compatible avec Linux
  • Alertes de défaillance HW - E-mail ou SNMP
  • Accès redondant pour la gestion
  • Prise en charge des normes ouvertes (SMASH 2.0, LDAP, WSMAN)
  • Support VLAN
  • KVM et Virtual Media et SOL (aucune licence supplémentaire n'est nécessaire)
  • Maintenance aisée (outils flash en ligne de commande pour la mise à jour du micrologiciel)

Services de laboratoire Supermicro et de validation de concept Supermicro

Voir les détails