PM/Myrinet のテスト方法

もし、利用しているMyrinetがシリアルかファイバの Myrinet 2000 (M3S-PCI64BやM3F-PCI64B)の場合は ネットワークタイプをmyrinet2k、ファー ムウェアはlanaiM2k.mcpを利用して下さい。rpmtestとscstestでこれらを利用 すはサーバ上のscorehosts.dbを変更する必要があります。ServerへのSCore Systemのインストール を参照して下さい。

利用しているネットワークがMyrinet 2000の場合は、以下のコマンドのネットワークタイプ指定myrinetをmyrinet2kに変更して下さい。 Ex. $ ./rpminit comp0 myrinet2k

1. ループバック テスト
   以下のコマンドを実行します:

   $ cd /opt/score/sbin
   $ ./rpminit comp0 myrinet
   $ ./rpmtest comp0 myrinet -dest 0 -ping
   	成功: "8     1.2269e-05" のような2つの数字が表示されます
                    1番目の数字はデータのサイズ(byte)です
                    2番目の数字はレイテンシ(秒)です
   	失敗: エラーとダンプメッセージが表示されます
   

   このテストが失敗した場合は、トラブルシューディングを参照してください。

2. Point-to-Point テスト (メッセージ)
   PM カーネルドライバが全てのホスト上にインストール済みであることを確認してください。 PM の通信機能をテストするためには、rpmtest コマンドを使用します。 たとえば、comp0 (ノード 0) から comp1 (ノード 1) へ 通信できるかどうかをテストしたい場合は次のようにしてください。

   以下のコマンドを実行します:

   $ cd /opt/score/sbin
   $ ./rpmtest comp1 myrinet -reply
   

   server host の別のウィンドウで次のコマンドを実行します:

   $ cd /opt/score/sbin
   $ ./rpmtest comp0 myrinet -dest 1 -ping
   	ループバックテストと同じ結果にならなければなりません
   

   テストを終えるときは、プロセスが無限ループしているので、server host 上の pmtest プロセスを kill するのを忘れないでください。 このテストが失敗した場合は、トラブルシューディングを参照してください。

3. Point-to-Point テスト (ゼロコピー)
   comp0 (ノード 0) から comp1 (ノード 1) へ 通信できるかどうかをテストしたい場合は次のようにしてください。

   以下のコマンドを実行します:

   $ cd /opt/score/sbin
   $ ./rpmtest comp1 myrinet -vreply
   

   server host の別のウィンドウで次のコマンドを実行します:

   $ cd /opt/score/sbin
   $ ./rpmtest comp0 myrinet -dest 1 -vwrite
   	成功: "8     913452" のような2つの数字が表示されます
                    1番目の数字はデータのサイズ(byte)です
                    2番目の数字はバンド幅(bytes/sec)です
   	失敗: エラーとダンプメッセージが表示されます
   

   テストを終えるときは、プロセスが無限ループしているので、server host 上の pmtest プロセスを kill するのを忘れないでください。 このテストが失敗した場合は、トラブルシューディングを参照してください。

4. 総合テスト
   これはストレステストです。 全てのホストがランダムに巨大なメッセージを他のホストに送信します。 次のコマンドを実行します:

   $ cd /opt/score/deploy
   $ scout -g pcc
   SCOUT: Spawn done.
   SCOUT: session started
   $ ./scstest -network myrinet
   CSTEST: BURST on myrinet
   50 K messages.
   100 K messages.
   150 K messages.
   200 K messages.
   250 K messages.
   300 K messages.
           成功: 転送されたメッセージ数が表示されます
           失敗: エラーメッセージが表示されます
   

   このテストを止めるには Ctrl-C 押すか他の中断コマンドを実行してください。
   このテストが失敗した場合は、トラブルシューディングを参照してください。

トラブルシューディング

Pminit が原因の失敗

• Myrinet ケーブルが正しく接続されていない。
• Myrinet デバイスドライバがインストールされていない。
• /dev/pmmyri/number が mkpmmyridev.sh コマンドによって作成されていない。
• /dev/pmmyri/number のパーミッションが正しくない。
• mcp ファイルまたは設定ファイルがない。
• 設定ファイルの内容が間違っている。
• Myrinet カードがインストールされていない。
• Myrinet カードがしっかり挿入されていない。
• マザーボードの PCI バスクロックが33MHzより高い (例: 37.5MHz)。
• Myrinet カードが壊れている。

ループバックテストが失敗

• Myrinet カードが正しく Myrinet スイッチに接続されていない。
• ホスト上で他に Myrinet を使っているプロセスが存在する。
• Myrinet カードがしっかり挿入されていない。
• Myrinet のケーブルが壊れている。
• Myrinet カードが正常に動作していない。
• Myrinet スイッチが正常に動作していない。

Point-to-point テストが失敗

• 設定ファイルの記述と実際の接続が異なる。
• ホスト上で他に Myrinet を使っているプロセスが存在する。
• Myrinet-2000カードの場合、トリマの位置が2000になっている。これは 1280の位置でなければいけない。なぜなら、現在（2000年10月25日）、 Myrinet-2000対応のスイッチがないからである。
• Myrinet カードが正しく Myrinet スイッチに接続されていない。
• Myrinet のケーブルが壊れている。
• Myrinet カードが正常に動作していない。
• Myrinet スイッチが正常に動作していない。
• ゼロコピーがマシン上でサポートされていない。

総合テストが失敗

• 設定ファイルの記述と実際の接続が異なる。
• ホスト上で他に Myrinet を使っているプロセスが存在する。
• Myrinet-2000カードの場合、トリマの位置を接続するスイッチにより 適切に設定しなければならない。古いタイプのMyrinetスイッチに接 続する場合は1280に、Myrinet 2000対応のスイッチの場合は2000にし なければいけない。
• Myrinet のケーブルが壊れている。
• Myrinet カードが正常に動作していない。
• Myrinet スイッチが正常に動作していない。