Aller au contenu principal

Solutions Hadoop pour le Big Data

Solutions Supermicro et Cloudera

Le défi

Les applications en constante évolution génèrent une énorme quantité d'informations, qu'il s'agisse de données structurées, non structurées ou semi-structurées. L'infrastructure informatique conventionnelle n'est pas conçue pour gérer la variété, la vitesse et le volume des données produites par les réseaux de médias sociaux, les applications mobiles, les capteurs de machines et les recherches scientifiques, etc. Pour les entreprises, l'utilisation de l'analyse des big data n'est plus une question de temps, c'est une question de moyens. Hadoop, conçu pour le stockage et le traitement rentables de grands volumes de données, est né pour cela. Il peut évoluer linéairement jusqu'à des milliers de serveurs et des pétaoctets de stockage.

La question de savoir comment tirer parti de la technologie Hadoop et acquérir un avantage concurrentiel est présente dans l'esprit de presque tous les directeurs des systèmes d'information des entreprises. Pour les entreprises, la manière de déployer efficacement l'infrastructure Hadoop est synonyme de victoire ou de défaite dans la grande bataille des parts de marché. Les entreprises qui déploient des solutions Hadoop consacrent souvent beaucoup de ressources à la recherche de la meilleure architecture et du fournisseur de solutions le plus compétent. C'est là que Supermicro intervient.

La solution

Voici les clusters Supermicro Hadoop, une série de solutions optimisées pour le big data qui offrent de hautes performances, une grande fiabilité et une grande évolutivité. Les solutions Supermicro Hadoop sont des clusters clés en main entièrement intégrés, optimisés et testés, avec des offres de support flexibles disponibles pour répondre aux besoins spécifiques des clients.

Les clusters Hadoop de Supermicro comprennent des serveurs de calcul et de stockage haute densité éprouvés par l'industrie, dotés des meilleurs composants sélectionnés par le biais d'une conception, d'une validation et de tests d'ingénierie approfondis. Les configurations certifiées simplifient la conception et le déploiement d'une infrastructure de calcul et de stockage Big Data réellement évolutive qui répond aux environnements informatiques et de centres de données d'entreprise les plus exigeants.

Avantage Supermicro

  • Conçu dès le départ avec des configurations optimales de serveurs et de clusters qui répondent à une grande variété de charges de travail.
  • Des solutions éprouvées basées sur des tests en laboratoire et des déploiements de production à grande échelle.
  • Obtenir le meilleur rapport prix/performance et le meilleur rapport prix/capacité avec les plateformes de serveurs et de stockage les plus performantes du secteur
  • Clusters Hadoop clés en main de bout en bout avec matériel, logiciel et support mondial entièrement intégrés
  • Architecture avancée basée sur les dernières technologies telles que les CPU SkyLake, SAS3, NVMe, Optane Drives 
  • Performances réseau et redondance accrues grâce aux options doubles 10GbE / 25GbE / 40GbE / 100GbE
  • Des tests automatisés en grappe complète garantissent la qualité de la construction et le respect du calendrier de livraison.

Cluster Hadoop entièrement intégré

Principales caractéristiques et avantages :

  • Configurations de clusters spécifiques optimisées pour la capacité, le calcul ou la performance IO
  • Conception de nœuds de nom à haute disponibilité, sans point de défaillance unique
  • Grandes options de mémoire conçues spécifiquement pour Spark et d'autres calculs en mémoire et à faible latence
  • Plateformes de serveurs Hyper conçues pour les déploiements de très grande envergure
  • Conception à haute densité de calcul, de stockage et de mémoire pour obtenir la meilleure efficacité et le coût total de possession le plus bas.
  • Options de commutation réseau flexibles avec 1 ou 2 commutateurs 10G / 25G / 100G par rack.
  • Conception rentable en rack 14U, idéale pour un environnement de test de validation du concept
  • Conception de rack standard 42U et options PDU flexibles pour répondre à tous les environnements de centres de données
  • Efficacité jusqu'au niveau Titanium (96%+) - Alimentations redondantes avec PMBus
  • Intégrée avec IPMI et la suite SMC OOB (out of band management) pour une gestion automatisée des clusters.
  • Entièrement intégré, entièrement configuré et entièrement testé avec les distributions Hadoop de votre choix
  • La grappe d'essai de la preuve de concept est disponible pour une expérience d'achat sans risque.
Solution de cluster Hadoop entièrement intégrée de Supermicro
  • 1 ou 2x 48 ports 10G SFP+ / 10GBase-T / 25GbE
    1 ou 2x 32 ports 100GbE, 1x 48 ports Switch, GbE
  • 1x Management Node 1U UP Skylake 41xx / 51xx
  • 3x Name Nodes 1U DP Xeon Skylake 41xx / 51xx / 61xx
  • Nœuds de données optimisés 2U SSG, 2U BigTwin ou 4U FatTwin avec processeurs Skylake 41xx / 51xx / 61xx / 81xx, double 10G / 25G / 40G par nœud, options de disques durs 2,5" et 3,5
  • Rack standard 42U avec PDU mesurées, options de personnalisation du rack disponibles
  • Le service d'intégration comprend le rodage et le test complet du cluster, la mise à jour du BIOS et du FW, la configuration du réseau, la pré-installation de la distribution Hadoop de votre choix et le cluster complet.

Spécifications techniques du cluster Hadoop

 Grande capacitéOptimisation des OICalcul haute densitéÉquilibré
Modèle SKUSRS-HCSG18-HADP-01SRS-IOBT32-HADP-01SRS-HDFT36-HADP-01SRS-BLSG37-HADP-01
Nœud de données24SYS-2029BT-HNRSYS-F629P3-RC0BSSG-6019P-ACR12L
Nœud de données (Qté)18323637
Facteur de formeSuperStorage 2U2U BigTwin4U FatTwin1U SuperStorage
2x SKL 4114 2P 10C/20T 2.2G 85W2x SKL 5118 4/2P 12C/24T 2.3G 105W2x SKL 6130 4/2P 16C/32T 2.1G 125W2x SKL 5118 4/2P 12C/24T 2.3G 105W
128192256128
24 baies 3,5"6 baies 2,5"8 Baie 3.5"12 baies 3,5"
Nombre total de lecteurs de données432448 (NVMe)*288444
Total des noyaux3607681152888
Mémoire totale2.36.1449.24.7
Stockage total3,45PB (8TB)1,792PB (4TB)1,15PB (4TB)2,66PB (6TB)
Nom Nœud3x 1U WIO3x 1U WIO3x 1U WIO3x 1U WIO
Switches 1x 48PT 25GBase-T2x 32PT 40G1x 48PT GbE1x 48PT10G SFP+
Armoire (L x H x P)42U
23,5 x 82,4 x 48
PDU2x 50A 208 3-Phase Metered PDU
*ADD 32 Bay 2.5" Drives x8 JBOF = 256 NVMe

Spécifications du serveur

  • Base de données d'entreprise, Traitement et stockage des bases de données, Serveur d'entreprise, HPC, Centre de données, iSCSI SAN
  • Prise en charge de deux sockets P (LGA 3647) : Processeurs Intel® Xeon® Scalable ; 3 UPI jusqu'à 10.4GT/s
  • 24 emplacements DIMM ; jusqu'à 3 To ECC 3DS LRDIMM ou RDIMM DDR4 2400MHz
  • 24 baies de lecteur SAS3/SATA3 3,5" interchangeables à chaud, 2 baies de lecteur 2,5" interchangeables à chaud (arrière) ; SAS3 via Broadcom 3008 AOC
  • 2 emplacements PCI-E 3.0 x16 et 1 emplacement PCI-E 3.0 x8
  • 1 Port IPMI dédié
  • 1 VGA, 1 COM, 2 USB 3.0, 1 Type A
  • 5 ventilateurs de refroidissement PWM redondants de 80 mm permutables à chaud
  • Alimentations redondantes 1600W de niveau Titanium (96%)
  • 4 nœuds DP dans 2U ; profondeur 28.5", chaque nœud :
  • Prise en charge de deux sockets P (LGA 3647) : Processeurs Intel® Xeon® Scalable ; double UPI jusqu'à 10.4GT/s
  • 24 DIMM ; jusqu'à 3 To ECC 3DS LRDIMM ou RDIMM DDR4-2666MHz
  • 6 baies de disques NVMe 2,5" échangeables à chaud par nœud
  • 2 emplacements PCI-E 3.0 x16 Low-profile, 1 carte SIOM réseau
  • 1 port IPMI dédié, 1 VGA, 2 USB 3.0, 1 SuperDOM
  • 4 ventilateurs robustes de 80 mm avec contrôle optimal de la vitesse du ventilateur
  • Alimentations redondantes 2200W de niveau Titanium (96%)
  • Serveur FatTwin™ ; CHAQUE NODE (x4 nœuds de système branchés à chaud) :
  • Prise en charge de deux sockets P (LGA 3647) : Processeurs Intel® Xeon® Scalable ; double UPI jusqu'à 10.4GT/s
  • 12 DIMM ; jusqu'à 1,5 To ECC 3DS LRDIMM, jusqu'à DDR4-2666MHz
  • 8x 3,5" SAS3 ou 6 SAS3 + 2 opt. NVMe U.2 ; SAS3 avec Broadcom 3008
  • 1 PCI-E 3.0 x16 (LP), 1 PCI-E 3.0 x16 (SIOM : flexible network opt.)
  • 1 port IPMI dédié, 1 VGA, 2 USB 3.0, 1 support M.2
  • 2x 8cm 14k RPM ventilateurs centraux
  • Alimentations redondantes 1200W de niveau Titanium (96%)
  • Stockage haute densité, stockage d'objets 1U, Ceph / Hadoop, stockage évolutif, Big Data Analytics
  • Prise en charge de deux sockets P (LGA 3647) : Processeurs Intel® Xeon® Scalable de 2ème génération ; double UPI jusqu'à 10,4GT/s
  • 12 baies de lecteur SAS3/SATA3 3,5" interchangeables à chaud, 4 baies de lecteur NVMe/SATA 2,5" interchangeables à chaud
  • 12 DIMM ; jusqu'à 3 To 3DS ECC DDR4-2933 MHz RDIMM/LRDIMM
  • Prend en charge Intel® Optane™ DCPMM*.
  • 2 PCI-E 3.0 x16, 1 PCI-E 3.0 x8
  • 2 ports 10GBase-T via Intel C622, 1 port IPMI dédié
  • 1 VGA, 4 USB 3.0, 1 connecteur TPM
  • 6x 4cm 20.5K RPM ventilateurs de refroidissement
  • 600Alimentations redondantes de niveau platine

*Contactez votre représentant Supermicro pour plus d'informations.

  • Commutation Ethernet de couche 2/3, agrégation de liens (LACP), trames Jumbo, support VLAN
  • Flexibilité de la configuration :
    • SSE-G24-TG4 - 24 ports RJ45 1Gbps Ethernet avec 4 ports SFP Combo, 4 ports 10Gbps Ethernet (CX4, XFP, ou SFP+), Empilage
    • SSE-G48-TG4 - 48 ports RJ45 1Gbps Ethernet avec 4 ports SFP Combo, 4 ports 10Gbps Ethernet (CX4, XFP, ou SFP+), Empilage
    • SSE-X24S / SSE-X3348S(R) - 24 ports 10Gbps Ethernet (SFP+), option flux d'air inversé
  • Gestion : Interface de gestion basée sur le Web, CLI standard avec telnet SSH ou port de gestion local, script, journalisation.
  • Routage, multidiffusion :
    • Qualité de service et DiffServ - 8 files d'attente prioritaires par port ; WRR ajusté et ordonnancement strict des priorités
    • Sécurité - Authentification par port 802.1x, authentification RADIUS et TACACS+, cryptage SSH / SSL
  • Dimensions : 17,3 "W x 15,2 "D x 1,7 "H (440mm x 386mm x 43mm)
  • 32 ports Ethernet à cent gigabits
    (chacun configuré au choix pour quarante gigabits ou 4x vingt-cinq gigabits)
  • Routage de couche 3 à vitesse filaire
  • 1:1 Connectivité non bloquante
  • Facteur de forme 1U pour une installation flexible
  • Adapté aux centres de données - modèles à flux d'air normal et inversé
  • Alimentations redondantes connectables à chaud
  • Métal nu - ONIE installé
  • Cumulus compatible avec Linux
  • Alertes de défaillance HW - E-mail ou SNMP
  • Accès redondant pour la gestion
  • Prise en charge des normes ouvertes (SMASH 2.0, LDAP, WSMAN)
  • Support VLAN
  • KVM et Virtual Media et SOL (aucune licence supplémentaire n'est nécessaire)
  • Maintenance aisée (outils flash en ligne de commande pour la mise à jour du micrologiciel)

Services de laboratoire d'intégration et de validation de concept Supermicro

Voir les détails