電話 03-6410-6070、FAX 03-6410-6073 電子メール ｉｎｆｏ＠ｈｐｃ−ｔｅｃｈｎｏｌｏｇｉｅｓ．ｃｏ．ｊｐ / ｓｕｐｐｏｒｔ＠ｈｐｃ−ｔｅｃｈｎｏｌｏｇｉｅｓ．ｃｏ．ｊｐ (アドレスは半角に変更して利用)
HPC-ProServer DPeM-Series (HPC Blade Server)
DPeM1000e: Blade Enclosure (Half Size Blade 16枚、Full Size Blade 8枚搭載可能)
DPeM610: Xeon 2socket 96GBメモリ Half Size Blade (16Blade 32CPU 128コア/筐体)
DPeM710: Xeon 2socket 144GBメモリ Full Size Blade (8Blade 16CPU 64コア/筐体)
DPeM605: Opteron 2socket 32GBメモリ Half Size Blade (16Blade 32CPU 128コア/筐体)
DPeM805: Opteron 2socket 64GBメモリ Full Size Blade (8Blade 16CPU 64コア/筐体)
DPeM905: Opteron 4socket 128GBメモリ Full Size Blade (8Blade 32CPU 128コア/筐体)
Xeon (Nehalem)、Opteron (Shanghai)に対応、低消費電力、省スペース、200V電源
DDR/QDR InfniBand対応、10GbE対応、ケーブルレス、集中管理、共通電源、KVMスイッチ
高い完成度のHPCシステムインテグレーションにて導入時からの本運用を実現
3年間の翌営業日オンサイト保守を標準提供、24時間365日当日4時間保守にも対応
高い密度実装が特長のブレードサーバ (09.6.29)
ブレードサーバを利用すると扱いやすい24Uラックを用いて
計算機16台と拡張機器類を余裕で収納できます。
しかし1Uサーバでは・・・
イラストは16台の計算機と拡張機器類を24Uラックに搭載した３種類のイメージです。左側のイラストで示したブレードサーバを用いた構成ではスペースが7Uも余っています。そのため後から必要に応じてストレージや計算ノードなどを追加することがで、安心して運用できます。
これに対して、真ん中のイラストのように1Uサーバを用いた構成ではスペースが1Uしか余りません。これでは新たな機材の追加はできませんから運用に不安が残ります。そのため現実には右側のイラストのように最初から42Uラックで構成しておくことをお勧めします。もし取り扱いの容易な24Uラックでの構成を希望される場合はブレードサーバを選択してください。
(クリックすると画像が拡大)
ブレードサーバを利用すると42Uラックを用いて
計算機32台と拡張機器類を余裕で収納できます。
しかし1Uサーバでは・・・
イラストは32台の計算機と拡張機器類を42Uラックに搭載したイメージです。左側のイラストで示したブレードサーバを用いた構成ではスペースが11Uも余っています。そのため後から必要に応じてストレージや計算ノードなどを追加することができ安心して運用できます。
これに対して、真ん中のイラストのうな1Uサーバの構成ではスペースに全く余裕がなく安心して運用できません。そのため現実には右側のイラストのように最初から42Uラックを２台用いて構成しておくことをお勧めします。もしラック１本での構成をご希望されるならブレードサーバをご検討ください。
Xeon 16node 32CPU 128core GbEクラスタの
ブレードサーバと1Uサーバでの構成と価格を検討
ブレードサーバは高価な印象があります。しかし実際に試算してみると決して高価ではありません。その状況を確認するため、計算機16台の構成で試算してみました。ブレードサーバのシステム価格が1025万円なのに対して、1Uサーバのシステム価格は955万円と両者の価格差は約70万円です。この価格差ならブレードサーバの長所は維持されます。
ブレードサーバによる高密度クラスタ
BladeServer (Xeon 16node 32CPU 128core)
GbE, HOST+Storage, UPS, 24U-Rack
計算機16台 : M610 (Xeon 2.4GHz 2CPU 8core 12GB) 52万円 x16 = 830万円
ブレード筐体 : DPeM1000e = 60万円
KVM = 20万円
ホスト計算機 : DPeR710 (2.13GHz 1CPU, 1TB HDD x4 RAID1) = 65万円
48ポートGbE スイッチ = 20万円
UPS = 10万円
24Uラック = 20万円
試算価格 : 1025万円
InfiniBandオプション【別売】
16ノードDDR SW&HCA セット: 252万円
16ノードQDR SW&HCA セット: 349万円
備考 : イラストのように7Uという十分な予備スペースが確保できます。3Uのディスクエンクロージャと4Uの計算サーバの追加搭載も可能です。価格も通常の1Uサーバと並んでいます。
1Uサーバによるクラスタ (過密な構成)
1U Server (Xeon 16node 32CPU 128core)
GbE, HOST+Storage, UPS, 24U-Rack
計算機16台 : R610 (2.4GHz 2CPU 8core, 12GB) 50万円 x16 = 800万円
モニタ切り替え機 (ブレードではブレード筐体に含まれる) = 20万円
KVM = 20万円
ホスト計算機 = DPeR710 (2.13GHz 1CPU, 1TB HDD x4 RAID1) = 65万円
48ポートGbE スイッチ = 20万円
UPS = 10万円
24Uラック = 20万円
試算価格 : 955万円
InfiniBandオプション【別売】
16ノードDDR SW&HCA セット : 740万円
16ノードQDR SW&HCA セット : 940万円
備考 : 24Uラックに16台の計算機と補助機器類を搭載すると、イラストのように過密な構成となり予備スペースも1Uしか残りません。これは避けた方が無難です。
1Uサーバによるクラスタ (適切な密度に再構成)
1U Server (Xeon 16node 32CPU 128core)
GbE, HOST+Storage, UPS, 42U-Rack
計算機16台 : R610 (2.4GHz 2CPU 8core, 12GB) 50万円 x16 = 800万円
モニタ切り替え機 (ブレードではブレード筐体に含まれる) = 20万円
KVM = 20万円
ホスト計算機 = DPeR710 (2.13GHz 1CPU, 1TB HDD x4 RAID1) = 65万円
48ポートGbE スイッチ = 20万円
UPS = 10万円
42Uラック = 20万円
試算価格 : 955万円
InfiniBandオプション【別売】
16ノードDDR SW&HCA セット : 740万円
16ノードQDR SW&HCA セット : 940万円
備考 : 上記の構成を42Uラックで実装したイラストです。スペースに余裕があり急な拡張にも余裕で対応が可能です。価格は同じです。
Xeon 32node 64CPU 256core GbEクラスタの
ブレードサーバと1Uサーバでの構成と価格を検討
より大規模な42Uラックによる32ノード構成のクラスタでの試算を行いました。こちらのモデルでは管理ノードとディスクエンクロージャが別筐体になったModulerTypeのホスト部を採用し15TBのディスクを搭載しています。ブレードサーバ側の価格は2039万円であるのに対して1Uサーバ側の価格は1915万円と、両者の価格差は約124万円でした。この価格差ならブレードサーバの長所が打ち消されることはありません。
ブレードサーバによる高密度クラスタ
Blade Server (Xeon 32ode 64CPU 256core)
GbE, HOST, Storage, UPS, 42U-Rack
計算機32台 : M610 (Xeon 2.4GHz 2CPU 8core 12GB) 52万円 x32 = 1664万円
ブレード筐体 : DPeM1000e 60万円 x2 = 120万円
KVM = 20万円
ホスト計算機 : DPeR610 (2.13GHz 2CPU, SAS I/F) = 65万円
ディスクアレイ : DPvMD1000 (1TB HDD x15) = 100万円
48ポートGbE スイッチ 20万円 x2 = 40万円
UPS = 10万円
42Uラック = 20万円
試算価格 : 2039万円
InfiniBandオプション【別売】
32ノードDDR SW&HCA セット (ハーフブロッキング) : 504万円
32ノードQDR SW&HCA セット : 698万円
備考 : イラストのように11Uという十分な予備スペースが確保できています。重心もすこし下がっており安定感があります。ラック一台分のスペースでシステム設置を希望されるのでしたらブレードによる構成をお勧めします。
1Uサーバによるクラスタ (過密な構成)
1U Server (Xeon 32ode 64CPU 256core)
GbE, HOST, Storage, UPS, 42U-Rack
計算機32台 : R610 (2.4GHz 2CPU 8core, 12GB) 50万円 x32 = 1600万円
モニタ切り替え機 (ブレードではブレード筐体に含まれる) 20万円 x2 = 40万円
KVM = 20万円
ホスト計算機 : DPeR710 (2.13GHz 2CPU, SAS I/F) = 65万円
ディスクアレイ : DPvMD1000 (1TB HDD x15) = 100万円
48ポートGbE スイッチ 20万円 x2 = 40万円
UPS = 10万円
42Uラック = 20万円
試算価格 : 1895万円
InfiniBandオプション【別売】
32ノードDDR SW&HCA セット : 1266万円
32ノードQDR SW&HCA セット : 1660万円
備考 : イラストのように予備スペースは余っていません。2台目のGbEスイッチは背面に実装しています。また重量も相当な重く床の耐荷重も問題となります。これは避けた方が良い構成です。このような場合は下のイラストのように42Uラックを２台用いてください。
1Uサーバによるクラスタ (適切な密度に再構成)
1U Server (Xeon 32ode 64CPU 256core)
GbE, HOST, Storage, UPS, 42U-Rack x2
計算機32台 : R610 (2.4GHz 2CPU 8core) 50万円 x32 = 1600万円
モニタ切り替え機 20万円 x2 = 40万円
KVM = 20万円
ホスト計算機 : DPeR710 (2.13GHz 2CPU, SAS I/F) = 65万円
ディスクアレイ : DPvMD1000 (1TB HDD x15) = 100万円
48ポートGbE スイッチ 20万円 x2 = 40万円
UPS = 10万円
42Uラック 20万円 x2 = 40万円
試算価格 : 1915万円
InfiniBandオプション【別売】
32ノードDDR SW&HCA セット : 1266万円
32ノードQDR SW&HCA セット : 1660万円
備考 : 上記の42Uラックにフル搭載した構成をラック２台に分散した実装のイラストです。
InfiniBandオプションの検討
ブレードサーバには専用のInfiniBand HCAカードとInfiniBandスイッチが提供されており、メーカー純正オプションのため低価格のみならず、サポート体制も最高レベルの「２４時間３６５日オンサイト保守」が標準でついています。そのため、クラスタでInfiniBandの利用を検討されている場合はBladeServerの採用をお勧めします。
以下に各構成での必要コストの概算を積算しています。定価ベースでの積算であり、値引きを考慮していませんから実売価格ではありませんが価格感は把握できます。
ブレードサーバ用のInfiniBandは低価格
ブレードサーバには専用のInfiniBand HCAカードとInfiniBandスイッチが提供されており、メーカー純正オプションのため価格も低く抑えられているのみならず、サポート体制も整っています。そのため、クラスタでInfiniBandの利用を検討されている場合は、BladeServerの採用用をお勧めします。
- DDR HCAカード : 11万円
- QDR HCAカード : 14万円
- DDR 24port スイッチ : 76万円
- QDR 32port スイッチ : 125万円
このInfiniBand機器を用いて16ノードと32ノードのInfiniBand構築用の機材セットを3年間の保守費込みで積算すると次のようになります。
- 16ノードDDRセット : 252万円
- 16ノードQDRセット : 349万円
- 32ノードDDRセット (ハーフブロッキング) : 504万円
- 32ノードQDRセット (ノンブロッキング) : 698万円
一般的ラックマウントサーバ用のInfiniBnadは高価
ラックマウントサーバには市販のInfiniBand HCAカードと1UサイズのnfiniBandスイッチが提供されています。それぞれの3年間の保守費込みでの概算単価は以下の通りです。
- DDR HCAカード : 33万円
- QDR HCAカード : 45万円
- DDR 36port スイッチ : 210万円
- QDR 36port スイッチ : 220万円
これを16ノードと32ノード構成で積算すると以下のようになります。
- 16ノードDDRセット : 740万円
- 16ノードQDRセット : 940万円
- 32ノードDDRセット (ノンブロッキング) : 1266万円
- 32ノードQDRセット (ノンブロッキング) : 1660万円
ブレードサーバは騒音に注意
ブレードサーバを研究室に設置される場合は騒音に注意してください。ブレードサーバは強力なファンを用いて強制冷却しているため大きな音を発します。そのため仕事をしている人の近くに設置することは避け、可能な限り防音された別室に設置することをお勧めします。
もし計算機を人の近くに設置することを希望される場合は、騒音対策が施されたワークステーションによるクラスタ構成をお勧めします。また、ラックでの低騒音化を希望される場合には、最新の1U/2Uサーバも十分に検討に値します。最新の1U/2Uサーバは騒音対策が施されており、騒音レベルは約55dB程にまでに抑えられています。
構築/設置サービス
高い品質の実現
システムの主要部を高品質なDell製品で統一することで多くのメリットが得られます。製品の品質が高いことは勿論、システムレベルの障害でも責任の所在が明確で、長期間の修理部品の確保が可能、システム拡張時の追加システム接続が容易など多くのメリットがあります。
完成品のHPCクラスタ
弊社のHPCクラスタは、システム構築、アプリケーション・セットアップ、完成テストまでの工程を社内で行い、完成品のHPCクラスタとして納入します。そのため早ければ納入当日中に実運用の開始が可能です。右の写真は、全ての工程が完了し、完成状態での試運転を実施中の24Uラック搭載クラスタです。
初期不良対策 (エージング/早期部品交換/予防部品交換)
ユーザ様の信頼を裏切ってしまう初期不良の出現を防ぐため、完成したHPCクラスタに対して高負荷ジョブを連続投入し、潜在的な不良を顕在化させます。検出された異常個所は症状に応じて、早期部品交換や予防部品交換などの対策を施し、製品の完成度を高めた上で納入を行っています。
完成品を納入
運送業者は翌日にはお客様サイトにHPCクラスタを納入します。お客様のサイトには弊社の技術スタッフも設置にご訪問しており、搬入・据付・接続・動作確認までを手早く行います。
操作方法をオンサイトでレクチャー
システムが利用可能になると、お客様とご一緒に、実際にジョブ投入を行いアプリケーションの動作確認、ジョブスケジューラの動作確認、ファイルサーバの接続確認などを行い、お客様の疑問点に対する応対や、使いやすくするための手直しなどを行います。完成品で納入するからこそ、納入当日から本稼動の開始にまで到達できるのです。