Spark open source, traitement des flux de données, solutions d'ingénierie des données pour l'IA

Supermicro basées sur l'open source

Le défi

Les applications en constante évolution génèrent une quantité colossale d’informations, qu’il s’agisse de données structurées, non structurées ou semi-structurées. Les infrastructures informatiques traditionnelles ne sont pas conçues pour gérer la diversité, la vitesse et le volume des données produites par les réseaux sociaux, les applications mobiles, les capteurs des machines, la recherche scientifique, etc. Pour les entreprises, l’utilisation de l’analyse du big data n’est plus une question de « quand », mais de « comment ». Spark et d’autres logiciels open source, conçus pour le stockage et le traitement rentables de grands volumes de données, ont été créés à cette fin. Ils peuvent évoluer de manière linéaire jusqu’à des milliers de serveurs et des pétaoctets de stockage.

Pour les prestataires de services et les clients maîtrisant les technologies open source, capables de gérer et d'assurer la maintenance d'une implémentation open source de Spark ainsi que des logiciels associés de traitement des flux de données et d'ingénierie des données, Supermicro le déploiement de clusters Kubernetes grâce à des systèmes fiables dotés de fonctionnalités de gestion « in-band » et « out-of-band », et en proposant un large choix de plates-formes système adaptées aux centres de données des clients.

La solution et Supermicro

Les clusters Supermicro prennent en charge les solutions open source grâce à un déploiement simplifié de Kubernetes.

• CHOIX DU SYSTÈME: Les clients peuvent choisir la plateforme matérielle la mieux adaptée pour mettre en place des clusters
  • Hyper montés en rack, serveurs Twin à plusieurs nœuds ou serveurs lames
  • Choix entre les architectures de processeurs Intel ou AMD
  • Choix des accélérateurs GPU pour des applications telles que l'accélération de Spark
  • Choix de disques : disques durs ( HDD ) HDD SSD NVMe
  • Choix d'architectures réseau, options allant de 10 GbE à 400 GbE
  • Tous sont gérés via Redfish mêmes Redfish IPMI / Redfish et peuvent être regroupés via l'interface unique Supermicro Composer
  • Une grande partie du déploiement peut être automatisée à l'aide de Supermicro Cloud Orchestrator
• CHOIX DE DÉPLOIEMENT: Les clients peuvent choisir entre un déploiement sur serveur physique, Red Hat OpenShift, Kubernetes ou sur machine virtuelle.
• ÉVOLUTIVITÉ: Les clients peuvent commencer avec le plus petit cluster et faire évoluer leur infrastructure en ajoutant des serveurs.
• AUTOMATISATION: Supermicro assembler le cluster, entièrement testé, avec une qualité d'assemblage garantie et un délai de livraison assuré. La mise en œuvre logicielle peut être déployée à l'aide des fonctionnalités d'automatisation de Supermicro Orchestrator.