Hadoop大數據解決方案

Supermicro 以及 Cloudera Solutions

挑戰

不斷變化的應用驅動著大量訊息，涵蓋結構化、非結構化和半結構化資料。傳統的IT基礎設施無法應對社群媒體網路、行動應用、機器感測器和科學研究等產生的資料種類繁多、速度快速且規模龐大。對企業而言，利用大數據分析已不再是「何時」的問題，而是如何的問題。 Hadoop正是為此而生，它旨在經濟高效地儲存和處理大量資料。 Hadoop可以線性擴展到數千台伺服器和PB級儲存。

如何利用Hadoop技術獲得競爭優勢是幾乎所有企業資訊長（CIO）都在思考的問題。對於企業而言，如何有效部署Hadoop基礎設施意味著在激烈的市場份額爭奪戰中成敗的關鍵。部署Hadoop解決方案的企業通常會花費大量資源來尋找最佳架構和最優秀的解決方案提供者。而這正是… Supermicro 進來幫忙。

解決方案

介紹Supermicro Hadoop 叢集是一系列最佳化的大數據解決方案，可提供高效能、高可靠性和高可擴展性。 Supermicro Hadoop解決方案是完全整合、完全最佳化和經過全面測試的交鑰匙集群，並提供靈活的支援包以滿足客戶的特定需求。

Supermicro Hadoop 叢集採用業界領先的高密度運算和儲存伺服器，這些伺服器配備了經過廣泛工程設計、驗證和測試精心挑選的頂級元件。經過認證的配置讓您無需猜測即可設計和部署真正可擴展的大數據運算和儲存基礎設施，滿足最嚴苛的企業 IT 和資料中心環境的需求。

Supermicro 優勢

  • 從零開始設計，採用最優的伺服器和叢集配置，以滿足各種工作負載的需求。
  • 基於大量實驗室測試和大規模生產部署的成熟解決方案
  • 透過業界領先的伺服器和儲存平台，實現最佳性價比和最佳容量性價比。
  • 提供端到端交鑰匙 Hadoop 集群，硬體、軟體和全球支援完全整合。
  • 基於最新技術（例如 SkyLake CPU、SAS3）的先進架構NVMe傲騰驅動器 
  • 增強的網路效能和冗餘性，提供雙 10GbE / 25GbE / 40GbE / 100GbE 選項
  • 自動化全集群測試可確保建置品質和交付進度

完全整合的Hadoop集群

主要特色 以及好處：

  • 專為容量、運算或 I/O 效能最佳化的叢集配置
  • 高可用性名稱節點設計，無單點故障
  • 專為 Spark 和其他記憶體內低延遲計算而設計的大容量記憶體選項
  • Hyper -專為超大規模部署而設計的可擴展伺服器平台
  • 高密度運算、儲存和記憶體設計，以實現最佳效率和最低成本TCO
  • 靈活的網路交換器選項，每個機架可配備 1 台或 2 台 10G / 25G / 100G 交換器。
  • 經濟高效的 14U 機架設計，是概念驗證測試環境的理想選擇
  • 標準 42U 機架設計和靈活的 PDU 選項，可滿足任何資料中心環境的需求。
  • 最高可達鈦金級（96%+）效率 - 採用 PMBus 的冗餘電源
  • 內建 IPMI 和 SMC OOB（帶外）功能管理功能用於自動化叢集的套件管理功能
  • 與您選擇的 Hadoop 發行版完全整合、完全配置並經過全面測試。
  • 概念驗證測試群集可供使用，提供無風險購買體驗
Supermicro 完全整合的Hadoop集群解決方案機架
  • 1 或 2x 48連接埠 10G SFP+ / 10GBase-T / 25GbE
    1 或 2x 32連接埠 100GbE，1x 48連接埠 交換機，千兆以太網
  • 1倍管理功能 節點 1U 上行 Skylake 41xx / 51xx
  • 3 個名稱節點 1U DP Xeon Skylake 41xx / 51xx / 61xx
  • 優化的資料節點，2U SSG、2U BigTwin 或 4U FatTwin，搭載 Skylake 41xx / 51xx / 61xx / 81xx 處理器，每個節點配備雙 10G / 25G / 40G 網卡，支援 2.5 吋和 3.5 吋硬碟。 HDD 選項
  • 標準 42U 機架，附計量型 PDU，提供機架客製選項
  • 整合服務包括完整的叢集老化測試、BIOS 和韌體更新、網路配置、預先安裝選定的 Hadoop 發行版以及完整的叢集部署。

Hadoop叢集技術規格

 高容量IO優化高密度計算均衡
型號 SKUSRS-HCSG18-HADP-01SRS-IOBT32-HADP-01SRS-HDFT36-HADP-01SRS-BLSG37-HADP-01
資料節點SSG-6029P-E1CR24LSYS-2029BT-HNRSYS-F629P3-RC0BSSG-6019P-ACR12L
資料節點（數量）18323637
外形尺寸2U SuperStorage2U BigTwin4U FatTwin1U SuperStorage
2 個 SKL 4114 2P 10C/20T 2.2G 85W2 個 SKL 5118 4/2P 12C/24T 2.3G 105W2 個 SKL 6130 4/2P 16C/32T 2.1G 125W2 個 SKL 5118 4/2P 12C/24T 2.3G 105W
128GB192GB256GB128GB
24 艙位 3.5 英寸6槽 2.5英寸8 個 3.5 吋插槽12個3.5吋插槽
總數據硬碟432448（ NVMe )*288444
總核心數3607681152888
總記憶體2.3TB6.144TB9.2TB4.7TB
總存儲3.45PB（8TB）1.792PB（4TB）1.15PB (4TB)2.66PB (6TB)
名稱節點3x 1U WIO3x 1U WIO3x 1U WIO3x 1U WIO
開關1 個 48PT 25GBase-T2x 32PT 40G1 個 48PT 千兆乙太網路介面1 個 48PT10G SFP+ 端口
櫃體（寬 x 高 x 深）42U
23.5 x 82.4 x 48
PDU2x 50A 208 三相計量式配電單元
*新增8個32盤位2.5吋硬碟位JBOF = 256 NVMe

伺服器規格

SSG-6029P-E1CR24L
SSG-6029P-E1CR24L
  • Corporate Database, Database Processing & Storage, Enterprise Server, HPC, Data Center, iSCSI SAN
  • Dual Socket P (LGA 3647) support: Intel® Xeon® Scalable processors; 3 UPI up to 10.4GT/s
  • 24 DIMM slots; up to 3TB ECC 3DS LRDIMM or RDIMM DDR4 2400MHz
  • 24 Hot-swap 3.5" SAS3/SATA3 drive bays, 2 Hot-swap 2.5" drive bays (rear); SAS3 via Broadcom 3008 AOC
  • 2 PCI-E 3.0 x16 and 1 PCI-E 3.0 x8 slots
  • 1 Dedicated IPMI port
  • 1 VGA, 1 COM, 2 USB 3.0, 1 Type A
  • 5 Hot-swap 80mm redundant PWM cooling fans
  • 1600W Redundant Titanium Level (96%) Power Supplies
SYS-2029BT-HNR
SYS-2029BT-HNR
  • 4 DP nodes in 2U; depth 28.5", Each Node:
  • Dual Socket P (LGA 3647) support: Intel® Xeon® Scalable processors; dual UPI up to 10.4GT/s
  • 24 DIMMs; up to 3TB ECC 3DS LRDIMM or RDIMM DDR4‑2666MHz
  • 6 Hot-swap 2.5" NVMe drive bays per node
  • 2 PCI-E 3.0 x16 Low-profile slots, 1 Networking SIOM card support
  • 1 Dedicated IPMI port, 1 VGA, 2 USB 3.0, 1 SuperDOM
  • 4 heavy duty 80mm fans w/ optimal fan speed control
  • 2200W Redundant Titanium Level (96%) Power Supplies
SYS-F629P3-RC0B
SYS-F629P3-RC0B
  • FatTwin™ Server; EACH NODE (x4 Hot-plug System Nodes):
  • Dual Socket P (LGA 3647) support: Intel® Xeon® Scalable processors; dual UPI up to 10.4GT/s
  • 12 DIMMs; up to 1.5TB ECC 3DS LRDIMM, up to DDR4‑2666MHz
  • 8x 3.5" SAS3 or 6 SAS3 + 2 opt. NVMe U.2; SAS3 with Broadcom 3008
  • 1 PCI-E 3.0 x16 (LP), 1 PCI-E 3.0 x16 (SIOM: flexible network opt.)
  • 1 Dedicated IPMI port, 1 VGA, 2 USB 3.0, 1 M.2 support
  • 2x 8cm 14k RPM middle fans
  • 1200W Redundant Titanium Level (96%) Power Supplies
SSG-6019P-ACR12L
SSG-6019P-ACR12L
  • High Density Storage, Object Storage 1U, Ceph / Hadoop, Scale-out Storage, Big Data Analytics
  • Dual Socket P (LGA 3647) support: 2nd Gen. Intel® Xeon® Scalable processors; dual UPI up to 10.4GT/s
  • 12 Hot-swap 3.5" SAS3/SATA3 drive bays, 4 Hot-swap 2.5" NVMe/SATA drive bays
  • 12 DIMMs; up to 3TB 3DS ECC DDR4-2933 MHz RDIMM/LRDIMM
  • Supports Intel® Optane™ DCPMM*
  • 2 PCI-E 3.0 x16, 1 PCI-E 3.0 x8
  • 2x 10GBase-T ports via Intel C622, 1 Dedicated IPMI port
  • 1 VGA, 4 USB 3.0, 1 TPM header
  • 6x 4cm 20.5K RPM cooling fans
  • 600W Redundant Platinum Level Power Supplies

*Contact your Supermicro sales rep for more info.

1Gb 和 10Gb 乙太網路交換機
1Gb 和 10Gb 乙太網路交換機
  • Layer 2/3 Ethernet Switching, link aggregation (LACP), Jumbo frames, VLAN support
  • Configuration Flexibility:
    • SSE-G24-TG4 - 24 ports of RJ45 1Gbps Ethernet with 4 SFP Combo ports, 4 ports 10Gbps Ethernet (CX4, XFP, or SFP+), Stacking
    • SSE-G48-TG4 - 48 ports of RJ45 1Gbps Ethernet with 4 SFP Combo ports, 4 ports 10Gbps Ethernet (CX4, XFP, or SFP+), Stacking
    • SSE-X24S / SSE-X3348S(R) - 24 ports 10Gbps Ethernet (SFP+), Reverse airflow option
  • Management: Web-based management interface, Industry standard CLI with telnet SSH or local management port, Scripting, Logging
  • Routing, Multicast:
    • Quality of service and DiffServ - 8 priority queues per port; Adjusted WRR and Strict Priority Scheduling
    • Security - 802.1x port based authentication, RADIUS and TACACS+ authentication, SSH / SSL encryption
  • Dimensions: 17.3"W x 15.2"D x 1.7"H (440mm x 386mm x 43mm)
SSE-C3632S
SSE-C3632S

/ SSE-C3632SR (32 ports)

  • 32x One-Hundred-Gigabit Ethernet ports
    (Each optionally configured for forty-gigabit or 4x twenty-five gigabit)
  • Wire-speed Layer 3 Routing
  • 1:1 Non-blocking connectivity
  • 1U form factor for flexible installation
  • Data-Center friendly - regular and reverse airflow models
  • Redundant hot-pluggable power supplies
  • Bare metal - ONIE Installed
  • Cumulus Linux Capable
IPMI 伺服器管理
IPMI 伺服器管理
  • HW fault alerts - E-mail or SNMP
  • Redundant access for management
  • Support for open standards (SMASH 2.0, LDAP, WSMAN)
  • VLAN support
  • KVM and Virtual Media and SOL (no additional license needed)
  • Easy maintenance (Command line flash tools for firmware update)

Supermicro 整合和概念驗證實驗室服務

看詳情

其他資源