跳至內容

Hadoop大數據解決方案

Supermicro 以及 Cloudera Solutions

挑戰

不斷變化的應用驅動著大量訊息,涵蓋結構化、非結構化和半結構化資料。傳統的IT基礎設施無法應對社群媒體網路、行動應用、機器感測器和科學研究等產生的資料種類繁多、速度快速且規模龐大。對企業而言,利用大數據分析已不再是「何時」的問題,而是如何的問題。 Hadoop正是為此而生,它旨在經濟高效地儲存和處理大量資料。 Hadoop可以線性擴展到數千台伺服器和PB級儲存。

如何利用Hadoop技術獲得競爭優勢是幾乎所有企業資訊長(CIO)都在思考的問題。對於企業而言,如何有效部署Hadoop基礎設施意味著在激烈的市場份額爭奪戰中成敗的關鍵。部署Hadoop解決方案的企業通常會花費大量資源來尋找最佳架構和最優秀的解決方案提供者。而這正是… Supermicro 進來幫忙。

解決方案

介紹Supermicro Hadoop 叢集是一系列最佳化的大數據解決方案,可提供高效能、高可靠性和高可擴展性。 Supermicro Hadoop解決方案是完全整合、完全最佳化和經過全面測試的交鑰匙集群,並提供靈活的支援包以滿足客戶的特定需求。

Supermicro Hadoop 叢集採用業界領先的高密度運算和儲存伺服器,這些伺服器配備了經過廣泛工程設計、驗證和測試精心挑選的頂級元件。經過認證的配置讓您無需猜測即可設計和部署真正可擴展的大數據運算和儲存基礎設施,滿足最嚴苛的企業 IT 和資料中心環境的需求。

Supermicro 優勢

  • 從零開始設計,採用最優的伺服器和叢集配置,以滿足各種工作負載的需求。
  • 基於大量實驗室測試和大規模生產部署的成熟解決方案
  • 透過業界領先的伺服器和儲存平台,實現最佳性價比和最佳容量性價比。
  • 提供端到端交鑰匙 Hadoop 集群,硬體、軟體和全球支援完全整合。
  • 基於最新技術(例如 SkyLake CPU、SAS3)的先進架構NVMe傲騰驅動器 
  • 增強的網路效能和冗餘性,提供雙 10GbE / 25GbE / 40GbE / 100GbE 選項
  • 自動化全集群測試可確保建置品質和交付進度

完全整合的Hadoop集群

主要特點和優勢:

  • 專為容量、運算或 I/O 效能最佳化的叢集配置
  • 高可用性名稱節點設計,無單點故障
  • 專為 Spark 和其他記憶體內低延遲計算而設計的大容量記憶體選項
  • Hyper -專為超大規模部署而設計的可擴展伺服器平台
  • 高密度運算、儲存和記憶體設計,以實現最佳效率和最低成本TCO
  • 靈活的網路交換器選項,每個機架可配備 1 台或 2 台 10G / 25G / 100G 交換器。
  • 經濟高效的 14U 機架設計,是概念驗證測試環境的理想選擇
  • 標準 42U 機架設計和靈活的 PDU 選項,可滿足任何資料中心環境的需求。
  • 最高可達鈦金級(96%+)效率 - 採用 PMBus 的冗餘電源
  • 內建 IPMI 和 SMC OOB(外帶管理)套件,用於自動化叢集管理
  • 與您選擇的 Hadoop 發行版完全整合、完全配置並經過全面測試。
  • 概念驗證測試群集可供使用,提供無風險購買體驗
Supermicro 完全整合的Hadoop集群解決方案機架
  • 1 或 2 個 48 埠 10G SFP+ / 10GBase-T / 25GbE
    1 或 2 台 32 埠 100GbE 交換機,1 台 48 埠交換機,千兆乙太網路
  • 1 個管理節點 1U UP Skylake 41xx / 51xx
  • 3 個名稱節點 1U DP Xeon Skylake 41xx / 51xx / 61xx
  • 優化的資料節點,2U SSG、2U BigTwin 或 4U FatTwin,搭載 Skylake 41xx / 51xx / 61xx / 81xx 處理器,每個節點配備雙 10G / 25G / 40G 網卡,支援 2.5 吋和 3.5 吋硬碟。 HDD 選項
  • 標準 42U 機架,附計量型 PDU,提供機架客製選項
  • 整合服務包括完整的叢集老化測試、BIOS 和韌體更新、網路配置、預先安裝選定的 Hadoop 發行版以及完整的叢集部署。

Hadoop叢集技術規格

 高容量IO優化高密度計算均衡
型號 SKUSRS-HCSG18-HADP-01SRS-IOBT32-HADP-01SRS-HDFT36-HADP-01SRS-BLSG37-HADP-01
資料節點SSG- 6029公務人員1 CR 24 LSYS-2029BT-HNRSYS-F629P3-RC0BSSG-6019P-ACR12L
資料節點(數量)18323637
外形尺寸2U SuperStorage2U BigTwin4U FatTwin1U SuperStorage
2 個 SKL 4114 2P 10C/20T 2.2G 85W2 個 SKL 5118 4/2P 12C/24T 2.3G 105W2 個 SKL 6130 4/2P 16C/32T 2.1G 125W2 個 SKL 5118 4/2P 12C/24T 2.3G 105W
128英國192英國256英國128英國
24 艙位 3.5 英寸6槽 2.5英寸8 個 3.5 吋插槽12個3.5吋插槽
總數據驅動432448( NVMe )*288444
總核心數3607681152888
總記憶體2.3結核病6.144結核病9.2結核病4.7結核病
總存儲3.45PB(8TB)1.792PB(4TB)1.15PB (4TB)2.66PB (6TB)
名稱節點3x 1U WIO3x 1U WIO3x 1U WIO3x 1U WIO
交換器1 個 48PT 25GBase-T2x 32PT 40G1 個 48PT 千兆乙太網路介面1 個 48PT10G SFP+ 端口
櫃體(寬 x 高 x 深)42U
23.5 x 82.4 x 48
PDU2x 50A 208 三相計量式配電單元
*新增8個32盤位2.5吋硬碟位JBOF = 256 NVMe

伺服器規格

  • 企業資料庫、資料庫處理與儲存、企業伺服器HPC資料中心,iSCSI SAN
  • 雙路 Socket P (LGA 3647) 支援:Intel® Xeon® 可擴充處理器;3 個 UPI,最高可達 10.4GT/s
  • 24 個 DIMM 插槽;最大支援 3TB ECC 3DS LRDIMM 或 RDIMM DDR4 2400MHz 內存
  • 24 個熱插拔 3.5 吋 SAS3/SATA3 硬碟位,2 個熱插拔 2.5 吋硬碟位(後);SAS3 透過 Broadcom 3008 AOC 晶片實現
  • 2 個 PCI-E 3.0 x16 插槽和 1 個 PCI-E 3.0 x8 插槽
  • 1 個專用 IPMI 端口
  • 1 個 VGA 介面、1 個 COM 介面、2 個 USB 3.0 介面、1 個 A 型接口
  • 5 顆可熱插拔的 80mm 冗餘 PWM 散熱風扇
  • 1600 W 冗餘級別( 96電源
  • 4 DP節點2 U;深度28.5每個節點:
  • 雙路 Socket P (LGA 3647) 支援:Intel® Xeon® 可擴充處理器;雙 UPI 最高可達 10.4GT/s
  • 24 個 DIMM 插槽;最大支援 3TB ECC 3DS LRDIMM 或 RDIMM DDR4-2666MHz 內存
  • 6個熱插拔2.5英寸NVMe 每個節點的驅動器托架
  • 2 個 PCI-E 3.0 x16 低矮型插槽,支援 1 個網路 SIOM 卡
  • 1 個專用 IPMI 連接埠、1 個 VGA 連接埠、2 個 USB 3.0 連接埠、1 個 SuperDOM 連接埠
  • 4 個 80 毫米大功率風扇,帶最佳風扇轉速控制
  • 2200 W 冗餘級別( 96電源
  • FatTwin™ 伺服器;每個節點(4 個熱插拔系統節點):
  • 雙路 Socket P (LGA 3647) 支援:Intel® Xeon® 可擴充處理器;雙 UPI 最高可達 10.4GT/s
  • 12 個 DIMM 插槽;最大支援 1.5TB ECC 3DS LRDIMM,最高支援 DDR4-2666MHz
  • 8 個 3.5 吋 SAS3 介面或 6 個 SAS3 介面 + 2 個可選介面。 NVMe U.2;SAS3 搭配 Broadcom 3008
  • 1 個 PCI-E 3.0 x16 (LP) 插槽,1 個 PCI-E 3.0 x16 (SIOM: 彈性網路選購) 插槽
  • 1 個專用 IPMI 連接埠、1 個 VGA 連接埠、2 個 USB 3.0 連接埠、1 個 M.2 支援連接埠
  • 2 個 8 公分 14000 轉/分 中置風扇
  • 1200 W 冗餘級別( 96電源
  • 高密度儲存、1U 物件儲存、Ceph/Hadoop、橫向擴充儲存、大數據分析
  • 雙路 Socket P (LGA 3647) 支援:第二代英特爾® Xeon® 可擴充處理器;雙 UPI 最高可達 10.4GT/s
  • 12 個熱插拔 3.5 吋 SAS3/SATA3 硬碟位,4 個熱插拔 2.5 吋硬碟位NVMe / SATA 驅動器托架
  • 12 DIMM;最多3結核病3 DS ECC DDR 4 - 2933 MHz RDIMM/LRDIMM
  • 支援 Intel® Optane™ DCPMM*
  • 2 個 PCI-E 3.0 x16 插槽,1 個 PCI-E 3.0 x8 插槽
  • 2 個透過 Intel C622 實現的 10GBase-T 端口,1 個專用 IPMI 端口
  • 1 個 VGA 介面、4 個 USB 3.0 介面、1 個 TPM 接頭
  • 6 個 4 公分 20.5K RPM 散熱風扇
  • 600 W 冗餘白金級電源

*聯絡您的Supermicro 聯絡銷售人員以了解更多資訊。

  • 二層/三層乙太網路交換、連結聚合(LACP)、巨型訊框、VLAN 支持
  • 配置靈活性:
    • SSE-G24-TG4 - 24 個 RJ45 1Gbps 乙太網路端口,帶 4 個 SFP Combo 連接埠和 4 個 10Gbps 乙太網路連接埠(CX4、XFP 或 SFP+),支援堆疊
    • SSE-G48-TG4 - 48 個 RJ45 1Gbps 乙太網路端口,帶 4 個 SFP Combo 連接埠和 4 個 10Gbps 乙太網路連接埠(CX4、XFP 或 SFP+),支援堆疊
    • SSE-X24S / SSE-X3348S(R) - 24 個 10Gbps 乙太網路連接埠 (SFP+),選用反向氣流
  • 管理:基於 Web 的管理介面、符合業界標準的 CLI(支援 Telnet、SSH 或本機管理連接埠)、腳本編寫、日誌記錄
  • 路由、組播:
    • 服務品質和差異服務- 每個連接埠 8 個優先權佇列;調整後的 WRR 和嚴格的優先權調度
    • 安全性- 基於 802.1x 連接埠的身份驗證、RADIUS 和 TACACS+ 身份驗證、SSH/SSL 加密
  • 尺寸:17.3吋寬 x 15.2吋深 x 1.7吋高(440毫米 x 386毫米 x 43毫米)
SSE-C3632S

/ SSE-C3632SR (32 埠)

  • 32 個 100 千兆乙太網路埠
    (每個可選配置為 40 千兆或 4 個 25 千兆)
  • 線速三層佈線
  • 1:1 無阻塞連接
  • 1U機架式設計,安裝靈活
  • 適用於資料中心 - 常規和反向氣流型號
  • 冗餘熱插拔電源
  • 裸機 - ONIE 安裝
  • 積雲Linux 有能力的
  • 硬體故障警報 - 電子郵件或 SNMP
  • 冗餘管理訪問
  • 支援開放標準(SMASH 2.0、LDAP、WSMAN)
  • VLAN 支援
  • KVM、虛擬媒體和 SOL(無需額外許可證)
  • 易於維護(使用命令列刷機工具進行韌體更新)

Supermicro 整合和概念驗證實驗室服務

看詳情