[SCore-users-jp] Network Trunking機構の設定について

Yoshihiro ISHIKAWA yoshihiro551230 ＠ bc.wakwak.com
2003年 11月 1日 (土) 18:25:27 JST 

亀山　様，富士通研住元　様

　先日はご回答いただきありがとうございました．
ようやくうまく動作いたしました．

　原因は，/opt/score/etc/pm-ethernet-1.conf
のファイル名ミスでした．

　Linpack hplベンチマークを行ったところ，
4CPU，1000Base-T x 2で約8GFLOPSの性能を
出すことができました．以前構築したBeowulf型で
同等のPCクラスタに比べると0.5GFLOPSほど性能
が向上しました．

以上です．今回はありがとうございました．

====================================
岩手大学大学院工学研究科機械工学専攻
航空宇宙システム部門/船崎・山田研究室
修士課程１年　石川慶拓 Yoshihiro Ishikawa
mail yoshihiro551230 ＠ bc.wakwak.com
====================================

----- Original Message ----- 
From: "Shinji Sumimoto" <s-sumi ＠ flab.fujitsu.co.jp>
To: <yoshihiro551230 ＠ bc.wakwak.com>
Cc: <score-users-jp ＠ pccluster.org>; <s-sumi ＠ flab.fujitsu.co.jp>
Sent: Friday, October 31, 2003 9:24 AM
Subject: Re: [SCore-users-jp] Network Trunking機構の設定について


> 石川様
>
> 富士通研の住元です。
>
> 以下のことを再度確かめて頂けないでしょうか?
>
> 1) 各ネットワークはupされているか?
>    /procで見えているので大丈夫かと思います。
>    /sbin/ifconfigで up状態になっているか?
>
> 2) デバイスドライバが正常にロードされているか?
>    dmesgでエラーが出力されていないか?
>    特にfsck後等に実行するとメモリが取れなくてエラーが出ることがあります。
>
> 3) /etc/init.d/pm_ethernet startを実行したときにエラーが出ていないか?
>    dmesgでエラーが出力されていないか?
>
> 4) /etc/init.d/pm_ethernet で設定されている UNIT番号と
pm-ethernet-[01].conf
>    のunitオプションで指定される番号があっているか?
>
> 5) 各unitのMACアドレスはあっているか?
>
> 以上に問題がなければ動くと思います。
>
> 一番最初の問題は2)だったのかもしれません。
>
> 念のためですが、scorehosts.dbを実行した後は/etc/init.d/scoreboard reload
> を忘れずに実行してください。
>
> From: "Yoshihiro ISHIKAWA" <yoshihiro551230 ＠ bc.wakwak.com>
> Subject: Re: [SCore-users-jp] Network Trunking機構の設定について
> Date: Fri, 31 Oct 2003 04:39:48 +0900
> Message-ID: <00ef01c39f1d$94a1b740$6f501da0 ＠ airfoceone>
>
> yoshihiro551230> 亀山　様
> yoshihiro551230>
> yoshihiro551230> 　先日はご回答いただきありがとうございました．その内容を
> yoshihiro551230> 参考にしつつ，eth1とeth2でNetwork Trunkingしようとしてい
る
> yoshihiro551230> ことに問題があるのではないかと思い，eth0とeth1でNetwork
> yoshihiro551230> Trunkingするように設定し，Point-to-Pointテストを実行する
と，
> yoshihiro551230> 以下のようなメッセージが出てしまいました．恐縮ですが再
度，
> yoshihiro551230> アドバイスをいただけないでしょうか？
> yoshihiro551230>
> yoshihiro551230> ===================================================
> yoshihiro551230> [root ＠ cluster2 sbin]# ./rpmtest cluster01
ethernet-1 -reply
> yoshihiro551230> Unable to get filename (ethernet-1,-config:file)
> yoshihiro551230> ===================================================
> yoshihiro551230>
> yoshihiro551230> 前回指摘のあったetherpmctl の実行は，
> yoshihiro551230>
> yoshihiro551230> /proc/pm/ethernet/0/info
> yoshihiro551230>  /proc/pm/ethernet/1/info
> yoshihiro551230>
> yoshihiro551230> が存在するので，正常にいったと思います．
> yoshihiro551230>
> yoshihiro551230> scoreboard.dbと各ノードの/etc/rc.d/init.d/pm_ethernet
> yoshihiro551230> は次のようにしました．
> yoshihiro551230>
> yoshihiro551230> ==scoreboard.db======================================
> yoshihiro551230>
> yoshihiro551230> ethernet-0      type=ethernet \
>
                 -config:file=/opt/score/etc/pm-ethernet-0.conf
> yoshihiro551230> ethernet-1      type=ethernet \
>
                 -config:file=/opt/score/etc/pm-ethernet-1.conf
> yoshihiro551230> ethernet-x2     type=ethernet \
>
                 -config:file=/opt/score/etc/pm-ethernet-0.conf \
>
                 -trunk0:file=/opt/score/etc/pm-ethernet-1.conf
> yoshihiro551230>
> yoshihiro551230> #define PCC     msgbserv=(cluster2.iwate-u.ac.jp:8764)
> yoshihiro551230>
> yoshihiro551230> cluster2.iwate-u.ac.jp \
> yoshihiro551230>  network=ethernet-0,ethernet-1,ethernet-x2 \
> yoshihiro551230>  group=_scoreall_,pccall smp=1 PCC
> yoshihiro551230> cluster01.iwate-u.ac.jp \
> yoshihiro551230>  network=ethernet-0,ethernet-1,ethernet-x2 \
> yoshihiro551230>  group=_scoreall_,pccall smp=1 PCC
> yoshihiro551230> cluster02.iwate-u.ac.jp \
> yoshihiro551230>  network=ethernet-0,ethernet-1,ethernet-x2 \
> yoshihiro551230>  group=_scoreall_,pccall smp=1 PCC
> yoshihiro551230> cluster03.iwate-u.ac.jp \
> yoshihiro551230>  network=ethernet-0,ethernet-1,ethernet-x2 \
> yoshihiro551230>  group=_scoreall_,pccall smp=1 PCC
> yoshihiro551230> =====================================================
> yoshihiro551230>
> yoshihiro551230> /etc/rc.d/init.d/pm_ethernetはeth0に加えてeth1を使用する
ので，
> yoshihiro551230> 下記のようにunit1とeth1の部分コメントアウトを外しました．
> yoshihiro551230>
> yoshihiro551230> ==/etc/rc.d/init.d/pm_ethernetの一部
===============================
> yoshihiro551230>         /sbin/etherpmctl $IF -pm on -ir
$INTERRUPT_REAPING -unit $UNIT
> yoshihiro551230>         /sbin/etherpmctl eth1 -pm on -ir
$INTERRUPT_REAPING -unit 1
> yoshihiro551230> #       /sbin/etherpmctl eth2 -pm on -ir
$INTERRUPT_REAPING -unit 2
> yoshihiro551230> #       /sbin/etherpmctl eth3 -pm on -ir
$INTERRUPT_REAPING -unit 3
> yoshihiro551230>         touch /var/lock/subsys/pm_ethernet
> yoshihiro551230>         ;;
> yoshihiro551230>   stop)
> yoshihiro551230>         echo -n "Stopping PM/Ethernet: "
> yoshihiro551230>         /sbin/etherpmctl $IF -pm off
> yoshihiro551230>         /sbin/etherpmctl eth1 -pm off
> yoshihiro551230> #       /sbin/etherpmctl eth2 -pm off
> yoshihiro551230> #       /sbin/etherpmctl eth3 -pm off
> yoshihiro551230>
================================================================
> yoshihiro551230>
> yoshihiro551230> 以上です．よろしくお願いいたします．
> yoshihiro551230>
> yoshihiro551230> ====================================
> yoshihiro551230> 岩手大学大学院工学研究科機械工学専攻
> yoshihiro551230> 航空宇宙システム部門/船崎・山田研究室
> yoshihiro551230> 修士課程１年　石川慶拓 Yoshihiro Ishikawa
> yoshihiro551230> mail yoshihiro551230 ＠ bc.wakwak.com
> yoshihiro551230> ====================================
> yoshihiro551230>
> yoshihiro551230>
> yoshihiro551230> ----- Original Message ----- 
> yoshihiro551230> From: <kameyama ＠ pccluster.org>
> yoshihiro551230> To: "Yoshihiro ISHIKAWA" <yoshihiro551230 ＠ bc.wakwak.com>
> yoshihiro551230> Cc: "SCoreメーリングリスト"
<score-users-jp ＠ pccluster.org>
> yoshihiro551230> Sent: Tuesday, October 21, 2003 9:16 AM
> yoshihiro551230> Subject: Re: [SCore-users-jp] Network Trunking機構の設定
について
> yoshihiro551230>
> yoshihiro551230>
> yoshihiro551230> > 亀山です.
> yoshihiro551230> >
> yoshihiro551230> > In article <00b401c39719$6101a460$6f501da0 ＠ airfoceone>
"Yoshihiro
> yoshihiro551230> ISHIKAWA" <yoshihiro551230 ＠ bc.wakwak.com> wrotes:
> yoshihiro551230> > > マニュアルを参考にNetwork Trunkingの設定をして，
> yoshihiro551230> > > Point-to-Pointテストをしたところ，以下のようなメッ
セージが
> yoshihiro551230> > > 出てきました．ethernet-1のところをethernetに変える
と，
> yoshihiro551230> > > うまくいくのですが，ethernet-1やethernet-2にすると，
うまく
> yoshihiro551230> > > いきません．何が原因でこのようになっているのか，お分
かり
> yoshihiro551230> > > の方がいらっしゃいましたら，教えていただきたく思いま
す．
> yoshihiro551230> > >
> yoshihiro551230> > > ===================================================
> yoshihiro551230> > > [root ＠ cluster2 sbin]# ./rpmtest cluster01
ethernet-1 -reply
> yoshihiro551230> > > pmOpenDevice: Cannot allocate memory(12)
> yoshihiro551230> > > ===================================================
> yoshihiro551230> >
> yoshihiro551230> > メモリ不足のようですが,
> yoshihiro551230> >
> yoshihiro551230> > > メモリ 2GB
> yoshihiro551230> >
> yoshihiro551230> > では考えにくいですね.
> yoshihiro551230> > 環境変数 PM_DEBUG を 1 にして実行すれば, もう少し情報が
とれると思います.
> yoshihiro551230> >
> yoshihiro551230> > あと etherpmctl の実行は正常にいったでしょうか?
> yoshihiro551230> >     /proc/pm/ethernet/0/info
> yoshihiro551230> >     /proc/pm/ethernet/1/info
> yoshihiro551230> > などが存在すれば大丈夫だとは思いますが...
> yoshihiro551230> >
> yoshihiro551230> > > このときのscorehosts.dbは以下のようになっています．
> yoshihiro551230> > >
> yoshihiro551230> > > == scorehosts.db ====================================
> yoshihiro551230> > > /* PM/Ethernet */
> yoshihiro551230> > > ethernet        type=ethernet \
> yoshihiro551230> > > /* PM/Ethernet */
> yoshihiro551230> > > ethernet        type=ethernet \
> yoshihiro551230> >
> yoshihiro551230> > ここまでの 4 行はゴミのようですので, 削除したほうがよい
と思います.
> yoshihiro551230> > (これが影響して ethernet を指定した場合に config file
とかが
> yoshihiro551230> > 無視されている可能性があります.)
> yoshihiro551230> >
> yoshihiro551230> > > /* PM/Ethernet */
> yoshihiro551230> > > ethernet        type=ethernet \
> yoshihiro551230> >
  -config:file=/opt/score/etc/pm-ethernet.conf
> yoshihiro551230> > > ethernet-1      type=ethernet \
> yoshihiro551230> >
  -config:file=/opt/score/etc/pm-ethernet-1.conf
> yoshihiro551230> > > ethernet-2      type=ethernet \
> yoshihiro551230> >
  -config:file=/opt/score/etc/pm-ethernet-2.conf
> yoshihiro551230> > > ethernet-x2     type=ethernet \
> yoshihiro551230> >
  -config:file=/opt/score/etc/pm-ethernet-1.conf
> yoshihiro551230> >
  -trunk0:file=/opt/score/etc/pm-ethernet-2.conf
> yoshihiro551230> > >
> yoshihiro551230> > > #define PCC
msgbserv=(cluster2.iwate-u.ac.jp:8764)
> yoshihiro551230> > >
> yoshihiro551230> > > cluster2.iwate-u.ac.jp \
> yoshihiro551230> > >
network=ethernet,ethernet-1,ethernet-2,ethernet-x2,udp \
> yoshihiro551230> > >  group=_scoreall_,pccall smp=1 PCC
> yoshihiro551230> >
> yoshihiro551230> > network の udp は存在しないようなので, 削除しないと
SCore が起動できないと
> yoshihiro551230> > 思います.
> yoshihiro551230> >
> yoshihiro551230> >                        from Kameyama Toyohisa
> yoshihiro551230> > _______________________________________________
> yoshihiro551230> > SCore-users-jp mailing list
> yoshihiro551230> > SCore-users-jp ＠ pccluster.org
> yoshihiro551230> >
http://www.pccluster.org/mailman/listinfo/score-users-jp
> yoshihiro551230> >
> yoshihiro551230>
> yoshihiro551230>
> yoshihiro551230> _______________________________________________
> yoshihiro551230> SCore-users-jp mailing list
> yoshihiro551230> SCore-users-jp ＠ pccluster.org
> yoshihiro551230> http://www.pccluster.org/mailman/listinfo/score-users-jp
> yoshihiro551230>
> yoshihiro551230>
> ------
> Shinji Sumimoto, Fujitsu Labs
> _______________________________________________
> SCore-users-jp mailing list
> SCore-users-jp ＠ pccluster.org
> http://www.pccluster.org/mailman/listinfo/score-users-jp
>

SCore-users-jp メーリングリストの案内