Spark、Hadoop、数据流处理、面向人工智能的数据工程解决方案

Supermicro Cloudera解决方案

挑战

不断变化的应用程序驱动着海量信息产生，涵盖结构化、非结构化及半结构化数据。传统IT基础设施无法应对社交媒体网络、移动应用、机器传感器及科研项目等产生的数据多样性、高速性和海量性。对企业而言，运用大数据分析已不再是"何时"的问题，而是"如何"的问题。 Spark、Hadoop等开源软件正是为此而生，它们专为高效存储和处理海量数据而设计，可线性扩展至数千台服务器和数千兆字节的存储空间。

Cloudera整合这些开源技术，并提供企业级支持，助力客户从海量数据中获取竞争优势。为此，Cloudera部署于可扩展的服务器集群中。Supermicro 提供兼具带内与带外管理功能的可靠系统，以及满足客户数据中心需求的丰富系统平台选择Supermicro Cloudera集群的部署流程。

解决方案与Supermicro

Supermicro ClouSupermicro 云数据平台（CDP），并提供简化的部署方案。

• 系统选择:客户可选择最佳硬件平台来构建集群
  • 机架式Hyper 系统或多节点 Twin 服务器或刀片服务器
  • 可选择 CPU 架构，英特尔或AMD 企业级 CPU
  • 为 Spark 加速等应用选择 GPU 加速器
  • 从 HDD 到 SSD 再到 NVMe 驱动器的磁盘选择
  • 网络架构选择，10GbE 至 400 GbE 选项
  • 所有设备均通过相同的IPMI/Redfish接口进行管理，并可通过单一管理界面的Supermicro Composer进行聚合管理。
  • 许多部署操作可通过Supermicro 云编排器实现自动化。
• 实施选择：客户可以在裸机实施、Red Hat OpenShift、Kubernetes 或虚拟机实施上进行部署
• 可扩展性：客户可以从最小的集群开始，然后通过增加服务器进行扩展。
• 自动化：Supermicro 集群，并通过全面测试确保构建质量与交付进度。软件实施可Supermicro 自动化功能进行部署。