Spark, Hadoop, traitement des flux de données, solutions d'ingénierie des données pour l'IA

Solutions Supermicro Cloudera

Le défi

Les applications en constante évolution génèrent une quantité colossale d’informations, qu’il s’agisse de données structurées, non structurées ou semi-structurées. Les infrastructures informatiques traditionnelles ne sont pas conçues pour gérer la diversité, la vitesse et le volume des données produites par les réseaux sociaux, les applications mobiles, les capteurs des machines et la recherche scientifique, etc. Pour les entreprises, l’utilisation de l’analyse du big data n’est plus une question de « quand », mais de « comment ». Spark, Hadoop et d’autres logiciels open source, conçus pour le stockage et le traitement à moindre coût de grands volumes de données, ont été créés à cette fin. Ils peuvent évoluer de manière linéaire jusqu’à des milliers de serveurs et des pétaoctets de stockage.

Cloudera intègre ces technologies open source et fournit un support de niveau entreprise afin d'aider ses clients à tirer parti de leur volume important de données pour acquérir un avantage concurrentiel. Pour ce faire, Cloudera est déployé au sein de clusters de serveurs évolutifs. Supermicro le déploiement des clusters Cloudera grâce à des systèmes fiables dotés de fonctionnalités de gestion en bande et hors bande, et en proposant un large choix de plates-formes adaptées aux centres de données des clients.

La solution et Supermicro

Les clusters Supermicro prennent en charge Cloudera Cloud Data Platform (CDP) et permettent un déploiement simplifié.

• CHOIX DU SYSTÈME: Les clients peuvent choisir la plateforme matérielle la mieux adaptée pour mettre en place des clusters
  • Hyper montés en rack, serveurs Twin à plusieurs nœuds ou serveurs lames
  • Choix entre les architectures de processeurs Intel ou AMD
  • Choix des accélérateurs GPU pour des applications telles que l'accélération de Spark
  • Choix de disques : disques durs ( HDD ) HDD SSD NVMe
  • Choix d'architectures réseau, options allant de 10 GbE à 400 GbE
  • Tous sont gérés via Redfish mêmes Redfish IPMI / Redfish et peuvent être regroupés via l'interface unique Supermicro Composer
  • Une grande partie du déploiement peut être automatisée à l'aide de Supermicro Cloud Orchestrator
• CHOIX DE DÉPLOIEMENT: Les clients peuvent choisir entre un déploiement sur serveur physique, Red Hat OpenShift, Kubernetes ou sur machine virtuelle.
• ÉVOLUTIVITÉ: Les clients peuvent commencer avec le plus petit cluster et faire évoluer leur infrastructure en ajoutant des serveurs.
• AUTOMATISATION: Supermicro assembler le cluster, entièrement testé, avec une qualité d'assemblage garantie et un délai de livraison assuré. La mise en œuvre logicielle peut être déployée à l'aide des fonctionnalités d'automatisation de Supermicro Orchestrator.