産総研がOpteron 2116個のLinuxスパコン導入へ 76
ストーリー by Oliver
64bitはやっぱり嬉しいんだろうな 部門より
64bitはやっぱり嬉しいんだろうな 部門より
k3c 曰く、 "IBMのプレスリリースによれば、独立行政法人産業技術総合研究所はAMDのOpteronプロセッサ(動作周波数2.0GHz)を2116個使用(サーバ台数1058台)し、Linuxで稼働するスーパーコンピュータを導入する。演算処理能力は理論値で11TFLOPSとなり、スーパーコンピューターとしては世界第3位、Linuxクラスター・システムおよびグリッドとしては世界最強となる。産総研ではこのスパコンを産学官連携を担う中核システムとして広く企業や学術機関に開放していく方針。来年春から稼働開始予定とのこと。"
小規模ですが (スコア:3, 参考になる)
こちらは一般には使わせてもらえないでしょうが、同じく産学分野利用。
同志社大学で、最終的に512プロセッサまで拡張するようです。
Turbolinux [turbolinux.co.jp] + ビジュアルテクノロジー [v-t.jp] 両株式会社ということで
国内メーカが手がけたものです。
大規模だと (スコア:3, 参考になる)
かなりあちらこちらで、Opteron+Linuxによるスーパーコンピュータの開発が進められているようです。
Opteronはコストパフォーマンスのよさで採用されているようですが、32bitアプリケーションがそのままで高速動作する点と、なにより発熱が非常に少ない [ascii24.com]ことが重要なポイントなのではないかと思います。
ブレードサーバーのように冷却のための送風路があまり確保できないときには、非常に重要ですから。
Re:小規模ですが (スコア:2, 興味深い)
関連ニュース (スコア:1)
Re:関連ニュース (スコア:0)
Re:小規模ですが (スコア:0)
会社概要 [v-t.jp] の「マーケティング本部長 西 和彦」ってありますね。
1ch.tvの二の舞だけは避けて欲しいものですな。
2ちゃんねるに勝負を挑んでおきながら戦いを前に自滅して不戦敗だったわけですし。
Re:小規模ですが (スコア:0)
名目上は,たんぱく質の構造解析とか言ってるけど,
ほんとは,TOP500に名前載せたいだけらしいけどね.
1TFlops勝ってる (スコア:2, 参考になる)
China Building Linux-Based 10 Teraflop Supercomputer [slashdot.org]
こっちもOpteron
magicmirror
Re:1TFlops勝ってる (スコア:1)
magicmirror
まず (スコア:0)
FLOPSでいいでしょ? (スコア:0)
Re:FLOPSでいいでしょ? (スコア:1)
# 前にも書いたな、このネタ。コメントの検索ができればいいんだけど。
あぁ、「ン」が消えてるんですよ。「ビーフン・カレー」ね。
Re:FLOPSでいいでしょ? (スコア:1)
> > 以前 Flops/sec という表記を見て突っ込んだら Flops の 's' は複数形の 's' だと言われたことがあります。
> FLoating Operations Per Second
↓ ↓ ↓ ↓ ↓
FL OP S / Sec なんだとか…
# まぁどうでもいい話なんですが
あぁ、「ン」が消えてるんですよ。「ビーフン・カレー」ね。
前回はマギでしたが (スコア:1, 参考になる)
#"思兼"をリクエスト
Re:前回はマギでしたが (スコア:2, 興味深い)
これを知っているので、Magi くらいでは驚きません(苦笑)。
Re:前回はマギでしたが (スコア:1)
その昔(5年以上前)fj.rec系でアクティブだった記憶がありますが、
お仕事でも包み隠さず発揮していらっしゃるのですね。
そういうリベラルな職場へのうらやみもなくはなし。
Re:前回はマギでしたが (スコア:1)
あ。それは言えてる。
マスコット人形(何を以ってそう呼ぶかは各自の判断ということで)を置いていいかどうかどころか、
「PCを縦置きにするか横置きにするか」すら
うるさく注文をつけてくる職場(というより上司個人の趣味)だと
本当に死にそうになります。
#その後首になったらしいのでザマミロとしか言いようが無いG7
てーか馬鹿な上司だったっす。
俺が縦置きにしようとしたら「そんなみっともなく非常識なことをするな」だとさ。
その筐体は明らかに縦置きも出来る構造になっているのに、だ。
PCの置き方みたいな些細な話だけならともかく、
本業の分析や設計でもそんな調子だった。
要するに彼が「常識」と呼ぶものの多く(結構多い割合)が、実は「自分の好み」でしかなかった。
かつ技術的に半可通なもんだから、技術的に間違った選択も平気で命令する。
#奴の暴走を止められなかったのは(下っ端の)俺のせいだなんて、新参の諸兄に言われたくないのでG7
#無理っす(T_T)
#でも、無理だったとはいえ、心情的には謝っておきます。ごめんなさいごめんなさい…
教訓:
自分の審美眼のカバー範囲ではない事柄については、自分の意見をもって決定事項とするのは、よそう。
#でもあーゆー奴は自分の審美眼の範囲自体を理解しないから、教訓は無駄になるのだけど。
Re:前回はマギでしたが (スコア:0)
Javaみたいな宣伝のためのマスコットならともかく、どうみても局地受けしかしなそうなキャラクターを表に出すのは、ちょっと勘弁して欲しい。
Re:前回はマギでしたが (スコア:1)
私はこういう遊び心はむしろいいことだと思います。一般人(?)が見たら引いてしまうという意見もあるとは思いますが、仕事でやる以上、重要なのは結果ですよね。スタッフがどれだけ楽しんでできるかというのが結果には大きく影響するのですから、こういうのはあたたかく育てていくほうがいいと思います。
Re:前回はマギでしたが (スコア:1)
--- (´-`)。oO(平和な日常は私を鈍くする) ---
Re:前回はマギでしたが (スコア:1)
>彼らが
スタッフは「たった一人だけ」でもなければ「(趣味が)一枚岩」というわけでもない、
ということ(問題)なんだと思います。
つまり「彼ら」の定義の問題ね。
#ホラー映画の名前とか車の名前とか並べられても俺なら引くと思うのでG7
##ん?車?れいあーす?
名前付けについて、派閥とかが出来てて、抗争があって、勢力の強弱があったりしたら
それはそれで不毛な世界かなーとか想像してみたり。
Re:前回はマギでしたが (スコア:1)
前者だと危険ですかね(^^;
Re:前回はマギでしたが (スコア:1)
せめて「ワンセブン」にしてくれ.
Re:前回はマギでしたが (スコア:0)
すでに商標とられててアウトとか言ったら怒る。
Re:前回はマギでしたが (スコア:0)
純粋なP4の実力(オフとぴ) (スコア:1, オフトピック)
結構IA64系と張り合えるんじゃないかと思ってるんですが....
オフトビだけどID
P3/P4系(オフとぴ)^2 (スコア:1, おもしろおかしい)
#386や486からx86を抜くと何が残るんだ? V30だと8080が...(笑)
Re:純粋なP4の実力(オフとぴ) (スコア:0)
1/3ほどのクロックのPowerPCと同等だと勝手に思ってる。
(Pentium4 3GHz≒PowerPC G4 1GHz)
# 幸せな妄想にすぎないのでAC
Re:純粋なP4の実力(オフとぴ) (スコア:1)
1/2位なんじゃないですかねぇ。(アプリによっても違うでしょうが)
ということはx86系のバイナリ変換を除いたP4は多分同クロックのPPC
と同等もしくは早いのではないでしょうか。
いつも思うのですがIA64なんか出すよりもP4/P3系のx86バイナリ
実行なし版を出せば設計リソースも共有できるし、
コストパフォーマンスも良好だと思うのです。
まIA32がここまで延命するとは当時予測できなかったんでしょうが。
#90年初頭(MIPSワークステーションとかあったころ)に2000年
超えてもx86がハイエンドであることを予測できなかったのでID
世界最強? (スコア:1)
http://pc.watch.impress.co.jp/docs/2003/0715/amd2.htm
の記事で米クレイ社が米軍に納入したlinuxとopteronを使った
システムは40TFLOPSです。
計画自体は去年からのものでRed Stromでググルと
結構いろんな資料が出てきます。
やなぎ
字面じゃなく論旨を読もう。モデレートはそれからだ
この人も世界最高を名乗ってますが (スコア:2, 参考になる)
プレスリリースやコンテンツがどこかの部門長の机の上で決裁待ちをしているあいだに抜かれたような気配ですね。
#広報担当が怒られなきゃいいけど…。
@大阪なヒト
導入決定 (スコア:1)
#値段が気になって両方のサイトの調達情報見に行ったのだけど収穫ナシ。
@大阪なヒト
クラスターのボトルネック (スコア:1)
某研究所のたんぱく質のシミュレーション用にPCクラスタを対象に作られた並列計算ソフトはイーサの100Base-TXのネットワークで5台でサチッちゃったらしい。やっぱり金のかかる計算は同期が必要だしな~。まさか素人みたくネットワークを考えないでPCの2116倍性能がでますとは言わないだろうし。
Re:クラスターのボトルネック (スコア:2, 参考になる)
ふつーの PC の 64bit PCI で 2.5 Gbps のはず.
以前は発熱がすごかったと記憶しているのですが,ラックマウントできる程度になったのですね.
Re:クラスターのボトルネック (スコア:1)
仮にそのソフトをその設定で使ったとしても、1000Baseなら30台、Myrinetなら100台以上いけることになります。
まあ実際には設定次第でもっと行けるというか、行っているところがありますので・・・
Myrinet2000 64bit 200MHz
-230MBytes/s
ノード単価 30~45万円
Myrinet2000 64bit 133MHz
-170MBytes/s
ノード単価 25~40万円
1000Base-T
-60MBytes/s
ノード単価 2~10万円
100Base-TX
-10MBytes/s
ノード単価 0.1~3万円
Re:クラスターのボトルネック (スコア:1)
が、#369475さん [srad.jp]は知らないのかも知れませんがスパコンの世界では一般的に1TFLOPSの性能を出すのに1Tbpsのネットワークが必要であるといわれています。
PCクラスタを組む場合、ネットワークがどうしても制限をうけてしまうのである特定の計算に特化したシステムを組むことで汎用性を犠牲にします。これはPCの数が増えれば増えるほど問題になってくる話なので産総研はどういうアプローチを取っているのかなぁと考えた次第です。理論値11TFLOPSのPCクラスタは作るのはお金をかければできますが、使いこなすのにはかなりの技術が必要だと思うのですが(さらに産総研にそういうノウハウがありそうな人っていないような気がしますし)、そういうことを心配する人は少ないのでしょうか?
Re:クラスターのボトルネック (スコア:2, 参考になる)
高性能計算の話をする人であれば、
と思うんですがね。ところで「1TFLOPSの性能を出すのに1Tbpsのネットワークが必要」ってのは、一本の線でテラビット出さなきゃならないの? どういう前提でこの言葉が出てくるのか、詳しく聞きたいな。
#最後の項は言い過ぎです
Re:クラスターのボトルネック (スコア:1)
> ・ 今さら100Base-TXでの事例なんて引合いに出さない
この考え方がどの辺から来てるのか分かりませんが、これまでスパコンを使っていた分野でもこれからはPCクラスタを使って計算しようというのが流行っています。計算のモデルとチューニングによってはネットワーク速度がそこまで必要ないものも有り、100Base-TXでスケールするものであれば100Base-TXで組んだPCクラスタで大規模計算をやっています。そもそもPCクラスタでやろうというのはコストを抑えようというのが大きいので安ければ安いに越したこと無いですしね。
> ・ グリッドでの使用を念頭に置いてる訳だから、2116台を単一の計
> 算につっこむ場合なんてそうそうないと理解している
グリッドでの使用を念頭に置いてる訳だからフルノードでの利用なんて考えられない、という意味が分からないのですが。グリッドのそもそもの思想は単一の計算を少数の高性能な計算機でなく、膨大な数のPCでやろうというものです。しかもフルノードでの計算を想定していないのであれば「演算処理能力は理論値で11TFLOPSとなり、スーパーコンピューターとしては世界第3位」という表記はあまり意味が無いですよね。
> ・「産総研にノウハウがない」なんて言ったら今日本にノウハウを
> 持ってる人がいない、というくらいに産総研に人材が集結している
> 事を知っている
産総研は確かに日本の中でも有数の研究機関ですし、成果も出している方だと思います。
> と思うんですがね。ところで「1TFLOPSの性能を出すのに1Tbpsの
> ネットワークが必要」ってのは、一本の線でテラビット出さなきゃ
> ならないの? どういう前提でこの言葉が出てくるのか、詳しく聞き
> たいな。
某H社のスパコンを作っているエンジニアから直接聞きました。「1TFLOPSの性能を出すには1TByteのメモリ、1Tbpsのネットワークが必要」のように考えるそうです。
Re:クラスターのボトルネック (スコア:1)
最後ぐらいしか(ちょっと語弊があるけど)ネットワークに負荷を
かけませんから、計算性能は台数効果を出せますがそりゃ当たり前。
それに、「あるソフトは100-TXだと5台でサチった」というのであれば、
じゃぁとりあえずギガビットイーサにすりゃいいじゃん、の一言で済ま
せられちゃいます。今時そんなに高くないんだから。今だとマザーボード
に搭載されていたりしますから、ますます100-TXという選択はありえなく
なってきていると思いますよ、1000ノード超という規模であれば。
(「音響カプラは止めといた方がいい」と言われているようなもんです)
「グリッドのそもそもの思想は単一の計算を膨大な数のPCでやろうというもの」
は間違いです。(computational)グリッドは電力網のアナロジーから
名付けられたもので、計算資源(CPU・メモリ・ストレージ・データ)を
電力網のようにどこからでも手軽に使えるインフラストラクチャとして
提供しよう、という発想です(だから"grid")。従って、グリッドを
対象にした計算資源(計算機)であれば、その資源が多様な目的で使用
される事が大前提なのです。もっとも、フルノードを時分割的に使わせ
るか、CPUを切り売りするように使わせるかは運営によるので、「フル
ノード同時使用は想定されていない」と断定するのはいき過ぎでしたが、
2000CPU規模の並列計算を効率良くこなせるソフトウェア(OS・ライブラリ・
アプリケーション)はそんなにない以上、切り売り式が普通の運営形態に
なるんじゃないかと、思います。件のクラスタがどう運営されるかは
まったく知らないので、これは憶測ですが。
最後の「1TFLOPSの性能を出すには1TByteのメモリ、1Tbpsのネットワークが必要」
ですが、これはなるほどですね。地球シミュレータの場合、
36TFLOPSで10TByte、ネットワークはノード間が16GB/sのクロスバー
スイッチですから、ざっといって10Tbpsのオーダにはなりますね。
オフトピックなんですが、 (スコア:1)
Re:オフトピックなんですが、 (スコア:2, 参考になる)
後からオプテロンが正式読みになったようです。
余ってるのに。。。 (スコア:0)
それに産総研内部で毎年すごい勢いで買い込んでるパソコンの余ったCPU時間をGridで稼働させるとかいうほうが、よっぽど面白いことになるようにも思うのですが。。。。
と言うことで、詳しいお話を内部の方、聞かせて!
そのための建物 (スコア:5, おもしろおかしい)
一応、パソコンを買いまくってるってのは事実なんですが、Gridできる(音頭を取れる)人が居るかどうかってのと、各パソコン使ってる人のスキルがまちまちであることと、実は産総研の各建物の電力契約上限がそういう多数のパソコン動かすには危険な位タイトでキッツいんじゃないかっていう・・・。
毎年、夏場でちょっと蒸し暑くなると旧電総研構内に流れる恐怖のアナウンス。
「電力の限界が近づいております。可能な限り実験機器、部屋の照明、電気を切って・・・。」
そーしても駄目だった場合、一般空調が問答無用で切れまする・・・。
Re:そのための建物 (スコア:2, 参考になる)
>実は産総研の各建物の電力契約上限がそういう
>多数のパソコン動かすには危険な位タイトで
>キッツいんじゃないかってう・・・。
1500kW出力ガスタービンのコジェネ発電機が別途そのために用意してあります。で、メイン発電機が転けると、UPSでバックアップしている間に予備のコジェネ発電機がバックアップ、それで駄目ならUPSで再度バックアップしてシャットダウンという設計です。
もちろんコジェネなので空調も電力と同時に供給してます。逼迫した産総研の電力契約量に対策を考えないであんなものは設置しないでしょう、普通。
>Gridできる(音頭を取れる)人が居るかどうか
やっぱりツッコむか!
産総研グリッド研究センターがメインで仕切っているが、グリッド研究センターにはGriddyな業界で音頭を取っているヤツがいないという発言?
Re:そのための建物 (スコア:1)
とにかく別に建物を建てている真っ最中なのは確かですが、コジェネの件は知らなかった。あ、でもそのコジェネは本館で流れるあの困った電力不足アナウンスにも、やろうと思えば対応できるもんなんでしょうか?それとも今建ててる建物用?
なんかすごくローカルなネタなのだけどID
Re:そのための建物 (スコア:1)
旧本館でヒマなパソコンをかき集めてやるとしたら不安、ってことです。
オフトピ:Typo (スコア:0, 参考になる)
○AMDのOpteronプロセッサ
結果が楽しみ (スコア:0)
Opetron 2.0GHz を 2116 石で論理性能11TFlops、と元記事にはありますが、さてはて、実際が楽しみです。
# しかし、これらを考えると、地球シミュレータって凄いことを再び実感。
Re:結果が楽しみ (スコア:1)
う~ん.変といえば変か...
でも『球』や『極』ではないだろうし,
電脳にかけて『脳』か?
2脳SMP, 512脳ハイパーキューブ, 1024脳グリッド
もっと変.(^^;)
2日前 (スコア:0)