本文へスキップ

Spark、Hadoop、データストリーミング、AI向けデータエンジニアリングソリューション

Supermicro と Cloudera ソリューション

挑戦

構造化データ、非構造化データ、半構造化データなど、刻々と変化するアプリケーションによって駆動される情報は膨大です。従来のITインフラは、ソーシャルメディア・ネットワーク、モバイル・アプリケーション、機械センサー、科学研究などによって生成されるデータの多様性、速度、量を処理するようには構築されていません。企業にとって、ビッグデータ分析の活用は、もはや「いつ」という問題ではなく、「どのように」という問題なのです。Spark、Hadoop、その他のオープンソースソフトウェアは、大量のデータをコスト効率よく保存・処理するために設計されており、この目的のために生まれました。数千台のサーバーとペタバイトのストレージまでリニアにスケールアップできます。

Clouderaはこれらのオープンソース技術を統合し、エンタープライズレベルのサポートを提供することで、顧客が大量のデータから競争優位性を得るのを支援します。そのため、Clouderaはスケーラブルなサーバークラスターにデプロイされます。Supermicroは、インバンドおよびアウトオブバンド管理の両方を備えた信頼性の高いシステムと、顧客のデータセンターに適合する幅広いシステムプラットフォームを提供することで、Clouderaクラスターのデプロイを簡素化します。

ソリューションとSupermicroの優位性

Supermicroサーバークラスターは、導入を簡素化し、Cloudera Cloud Data Platform (CDP) をサポートします。

  • システム選択:クラスタ構築に最適なハードウェアプラットフォームを選択可能
    • ラックマウントHyper CloudDCシステム、マルチノードTwinサーバー、ブレードサーバー
    • IntelまたはAMDエンタープライズCPUのいずれかのCPUアーキテクチャを選択可能
    • SparkアクセラレーションなどのアプリケーションのためのGPUアクセラレータの選択
    • HDDからSSD、NVMeドライブまで、ディスクを選択可能
    • ネットワーク・アーキテクチャの選択肢、10GbEから400GbEまでのオプション
    • すべて同じIPMI / Redfishインターフェースで管理され、シングルペインのSupermicro Cloud Composerによって集約可能です。
    • 多くのデプロイメントは、Supermicro Super Cloud Orchestratorを使用して自動化できます。
  • 実装の選択: お客様は、ベアメタル実装、Red Hat OpenShift、Kubernetes、または仮想マシン実装のいずれかにデプロイできます。
  • 拡張性: お客様は最小のクラスタから始め、サーバを追加して拡張することができます。
  • 自動化:Supermicro クラスターを構築Supermicro 、完全なテストを実施した上で、確かな構築品質と納期をSupermicro 。ソフトウェアの実装は、Supermicro オーケストレーターの自動化機能を活用して展開することが可能です。

完全に統合されたCloudera CDPクラスタの例

主な特徴と利点

  • キャパシティ、コンピュート、またはIOパフォーマンス向けに最適化された目的別クラスタ構成
  • Intel Xeon ScalableまたはAMD EPYC CPUの選択 – クラスター全体で同じCPUアーキテクチャを使用することを推奨します。
  • 単一障害点のない高可用性ネームノード設計
  • Sparkやその他のインメモリ、低レイテンシ計算専用に設計された大容量メモリオプション
  • 超大規模展開向けに設計されたHyper
  • 最高の効率と最小のTCOを実現する高密度のコンピュート、ストレージ、メモリ設計
  • ラックあたり1台または2台の10G/25G/100Gまたはそれ以上の高速スイッチによる柔軟なネットワーク・スイッチ・オプション。
  • 費用対効果の高い14Uラック設計、概念実証試験環境に最適
  • あらゆるデータセンター環境に対応する標準42Uラック設計と柔軟なPDUオプション
  • 最大チタニウムレベル(96%以上)の効率 - PMBus付き冗長電源装置
  • IPMIとSMC OOB(帯域外管理)スイートを内蔵し、クラスタ管理を自動化
  • ご希望のHadoopディストリビューションと完全に統合、設定、テスト済み
  • プルーフ・オブ・コンセプト・テスト・クラスタは、リスクなしで購入することができます。
  • Cloudera Enterpriseサポート(Clouderaからライセンスを取得
Supermicro 完全統合型 Hadoop クラスターソリューションラック
  • 1または2x 48ポート10G SFP+ / 10GBase-T / 25GbE
    1または2x 32ポート100GbE、1x 48ポート・スイッチ、GbE
  • 1x 管理ノード 1U Intel Xeon ScalableまたはAMD EPYC CPU
  • 3x ネームノード 1U DP Intel Xeon ScalableまたはAMD EPYC CPU
  • Intel Xeon ScalableまたはAMD EPYC CPUを搭載した最適化されたデータノード 2U SSG、2U BigTwin、または4U FatTwin®
  • 標準42Uラック、メーターPDU付き、ラックカスタマイズオプションあり
  • 統合サービスには、完全なクラスタのバーンインとテスト、BIOSとFWのアップデート、ネットワーク設定、選択したCloudera CDPディストリビューションのプリインストール、および完全なクラスタが含まれます。
Supermicro サーバー

ベアメタルまたはKubernetesデプロイメント向けSupermicroサーバー

1UCloudDC サーバーまたは

マルチノードGrandTwin®サーバー

または

VMwareデプロイメントまたはGPU利用向けSupermicroサーバー

2UHyper