面向人工智能的开源 Spark、数据流、数据工程解决方案

基于开源技术的Supermicro

挑战

从结构化数据、非结构化数据到半结构化数据，不断变化的应用驱动着海量信息。传统的 IT 基础设施无法处理由社交媒体网络、移动应用程序、机器传感器和科学研究等产生的种类繁多、速度快、数量大的数据。对于企业来说，利用大数据分析不再是一个时间问题，而是一个如何利用的问题。Spark 和其他开源软件就是为此而诞生的，它们专为低成本地存储和处理海量数据而设计。它可以线性扩展到数千台服务器和 PB 级存储。

对于能够管理和维护Spark开源实现及其相关数据流与数据工程软件的服务提供商和精通开源技术的客户Supermicro 提供兼具带内与带外管理功能的可靠系统，以及适配客户数据中心的丰富系统平台选择Supermicro Kubernetes集群的部署流程。

解决方案与Supermicro

Supermicro 集群支持开源技术，并简化了Kubernetes部署流程。

• 系统选择:客户可选择最佳硬件平台来构建集群
  • 机架式Hyper 系统或多节点 Twin 服务器或刀片服务器
  • 可选择 CPU 架构，英特尔或AMD 企业级 CPU
  • 为 Spark 加速等应用选择 GPU 加速器
  • 从 HDD 到 SSD 再到 NVMe 驱动器的磁盘选择
  • 网络架构选择，10GbE 至 400 GbE 选项
  • 所有设备均通过相同的IPMI/Redfish接口进行管理，并可通过单一管理界面的Supermicro Composer进行聚合管理。
  • 许多部署操作可通过Supermicro 云编排器实现自动化。
• 实施选择：客户可以在裸机实施、Red Hat OpenShift、Kubernetes 或虚拟机实施上进行部署
• 可扩展性：客户可以从最小的集群开始，然后通过增加服务器进行扩展。
• 自动化：Supermicro 集群，并通过全面测试确保构建质量与交付进度。软件实施可Supermicro 自动化功能进行部署。