PM/Myrinet のテスト方法

このテスト方法は server で X window システムが既に動いていることを前提とします。全てのコマンドは server host 上で呼び出されます。LANai7 が載った Myrinet NIC (M2M-PCI64A, M2L-PCI64A and M2M-PMC64A) の場合、事前にケーブルが正しく接続されていることを確認してください。

もし、利用しているMyrinetがシリアルかファイバの Myrinet 2000 (M3S-PCI64BやM3F-PCI64B)の場合はネットワークタイプをmyrinet2k、ファームウェアはlanaiM2k.mcpを利用して下さい。もし、利用しているMyrinetが Myrinet XP (M3F-PCIXD)の場合はネットワークタイプを myrinetxp、ファームウエアは lanaixp.mcp を利用してください。 rpmtestとscstestでこれらを利用すはサーバ上のscorehosts.dbを変更する必要があります。ServerへのSCore Systemのインストールを参照して下さい。

利用しているネットワークがmyrinet ではない場合は、以下のコマンドのネットワークタイプ指定myrinetを変更して下さい。
Ex. $ rpminit comp0 myrinet2k

ループバックテスト
以下のコマンドを実行します:

$ cd /opt/score/sbin
$ rpminit comp0 myrinet
$ rpmtest comp0 myrinet -dest 0 -ping
	成功: "8     1.2269e-05" のような2つの数字が表示されます
                 1番目の数字はデータのサイズ(byte)です
                 2番目の数字はレイテンシ(秒)です
	失敗: エラーとダンプメッセージが表示されます

このテストが失敗した場合は、トラブルシューディングを参照してください。

Point-to-Point テスト (メッセージ)
PM カーネルドライバが全てのホスト上にインストール済みであることを確認してください。 PM の通信機能をテストするためには、rpmtest コマンドを使用します。たとえば、comp0 (ノード 0) から comp1 (ノード 1) へ通信できるかどうかをテストしたい場合は次のようにしてください。
以下のコマンドを実行します:
```
$ rpmtest comp1 myrinet -reply
```
server host の別のウィンドウで次のコマンドを実行します:
```
$ rpmtest comp0 myrinet -dest 1 -ping
	ループバックテストと同じ結果にならなければなりません
```
テストを終えるときは、プロセスが無限ループしているので、server host 上の pmtest プロセスを kill するのを忘れないでください。このテストが失敗した場合は、トラブルシューディングを参照してください。
Point-to-Point テスト (ゼロコピー)
comp0 (ノード 0) から comp1 (ノード 1) へ通信できるかどうかをテストしたい場合は次のようにしてください。
以下のコマンドを実行します:
```
$ rpmtest comp1 myrinet -vreply
```
server host の別のウィンドウで次のコマンドを実行します:
```
$ rpmtest comp0 myrinet -dest 1 -vwrite
	成功: "8     913452" のような2つの数字が表示されます
                 1番目の数字はデータのサイズ(byte)です
                 2番目の数字はバンド幅(bytes/sec)です
	失敗: エラーとダンプメッセージが表示されます
```
テストを終えるときは、プロセスが無限ループしているので、server host 上の pmtest プロセスを kill するのを忘れないでください。このテストが失敗した場合は、トラブルシューディングを参照してください。
総合テスト
これはストレステストです。全てのホストがランダムに巨大なメッセージを他のホストに送信します。次のコマンドを実行します:
```
$ scout -g pcc
SCOUT: Spawn done.
SCOUT: session started
$ scstest -network myrinet
CSTEST: BURST on myrinet
50 K messages.
100 K messages.
150 K messages.
200 K messages.
250 K messages.
300 K messages.
        成功: 転送されたメッセージ数が表示されます
        失敗: エラーメッセージが表示されます
```
このテストを止めるには Ctrl-C 押すか他の中断コマンドを実行してください。
このテストが失敗した場合は、トラブルシューディングを参照してください。

トラブルシューディング

Pminit が原因の失敗

Myrinet ケーブルが正しく接続されていない。
Myrinet デバイスドライバがインストールされていない。
/dev/pmmyri/number が mkpmmyridev.sh コマンドによって作成されていない。
/dev/pmmyri/number のパーミッションが正しくない。
mcp ファイルまたは設定ファイルがない。
設定ファイルの内容が間違っている。
Myrinet カードがインストールされていない。
Myrinet カードがしっかり挿入されていない。
マザーボードの PCI バスクロックが33MHzより高い (例: 37.5MHz)。
Myrinet カードが壊れている。

ループバックテストが失敗

Myrinet カードが正しく Myrinet スイッチに接続されていない。
ホスト上で他に Myrinet を使っているプロセスが存在する。
Myrinet カードがしっかり挿入されていない。
Myrinet のケーブルが壊れている。
Myrinet カードが正常に動作していない。
Myrinet スイッチが正常に動作していない。

Point-to-point テストが失敗

設定ファイルの記述と実際の接続が異なる。
ホスト上で他に Myrinet を使っているプロセスが存在する。
Myrinet-2000カードの場合、トリマの位置が2000になっている。これは 1280の位置でなければいけない。なぜなら、現在（2000年10月25日）、 Myrinet-2000対応のスイッチがないからである。
Myrinet カードが正しく Myrinet スイッチに接続されていない。
Myrinet のケーブルが壊れている。
Myrinet カードが正常に動作していない。
Myrinet スイッチが正常に動作していない。
ゼロコピーがマシン上でサポートされていない。

総合テストが失敗

設定ファイルの記述と実際の接続が異なる。
ホスト上で他に Myrinet を使っているプロセスが存在する。
Myrinet-2000カードの場合、トリマの位置を接続するスイッチにより適切に設定しなければならない。古いタイプのMyrinetスイッチに接続する場合は1280に、Myrinet 2000対応のスイッチの場合は2000にしなければいけない。
Myrinet のケーブルが壊れている。
Myrinet カードが正常に動作していない。
Myrinet スイッチが正常に動作していない。

シリアルとファイバネットワークを持つMyrinet 2000に置けるトラブルシューティング(M3S-PCI64B、M3F-PCI64B).(new)

テストがいつも失敗する場合は、それぞれのMyrinet NICのCRCエラーが発生しているかどうか調べて下さい。各ノードで# cat /proc/pm/myrinet/0/info を実行することで調べることができます。このCRCエラーが1時間に1回以上の場合は、そのMyrinetは安定したハードウェアでないことを示しています。Myricom社は1時間に1回より小さいエラー率を保証しています。