From mario @ regulus.pcs.usp.br Fri Oct 1 02:18:28 2004 From: mario @ regulus.pcs.usp.br (Mario Donato Marino) Date: Thu, 30 Sep 2004 14:18:28 -0300 (BRT) Subject: [SCore-users-jp] Re: [SCore-users] doubt on Score rebuilding and compile a program In-Reply-To: <20040930001532.ED9AC12894C@neal.il.is.s.u-tokyo.ac.jp> References: <20040930001532.ED9AC12894C@neal.il.is.s.u-tokyo.ac.jp> Message-ID: On Thu, 30 Sep 2004 kameyama @ pccluster.org wrote: Dear Sir, > In article Mario Donato Marino wrotes: > > I tried to recompile Score5.8.0. In order to do this, I have > > installed all the sources and have executed the commands ./configure and > > make all. After finished the recompilation I tried to run the laplace_c.c > > (under scash directory) example, but it does not compile and the output > > is the following: > > > /opt/score/lib/i386-redhat8-linux2_4/libpm.a(pm.o): In function `pmInitDebug' > > : > > /opt/score/score-src/SCore/pm2/common/obj.i386-redhat8-linux2_4/../pm.c:100: > > undefined reference to `composite_open_device' > > /opt/score/score-src/SCore/pm2/common/obj.i386-redhat8-linux2_4/../pm.c:100: > > undefined reference to `composite_attach_context' > > /opt/score/lib/i386-redhat8-linux2_4/libpm.a(pm.o): In function `pmDebug': > > /opt/score/score-src/SCore/pm2/common/obj.i386-redhat8-linux2_4/../pm.c:120: > > undefined reference to `shmem_open_device' > > /opt/score/score-src/SCore/pm2/common/obj.i386-redhat8-linux2_4/../pm.c:118: > > undefined reference to `shmem_attach_context' > > Probabry, the compile of SCore is failed. > Please check following build log file: > /opt/score/score-src/out.*/score.build The archive score.build is attached to this e-mail. The problems are about line 239. What should I modify to solve them? Thanks in advance, Mario _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From kameyama @ pccluster.org Fri Oct 1 08:56:11 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Fri, 01 Oct 2004 08:56:11 +0900 Subject: [SCore-users-jp] Re: [SCore-users] doubt on Score rebuilding and compile a program In-Reply-To: Your message of "Thu, 30 Sep 2004 14:18:28 JST." Message-ID: <20040930235137.0B96312894E@neal.il.is.s.u-tokyo.ac.jp> In article Mario Donato Marino wrotes: > The archive score.build is attached to this e-mail. The > problems are about line 239. What should I modify to solve them? Please install kernel source rpm. PM program use kernel structure spinlock_t and more, This definitions are found under /usr/include/asm on Redhat 7.3 or before. But there are not found on redhat 8.0 or later. So PM use real kernel header file under /usr/src/linux2.4/include. But your host is not found kernel source. from Kameyama Toyohisa _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From mario @ regulus.pcs.usp.br Fri Oct 1 20:16:52 2004 From: mario @ regulus.pcs.usp.br (Mario Donato Marino) Date: Fri, 1 Oct 2004 08:16:52 -0300 (BRT) Subject: [SCore-users-jp] Re: [SCore-users] doubt on Score rebuilding and compile a program In-Reply-To: <20040930235137.0B96312894E@neal.il.is.s.u-tokyo.ac.jp> References: <20040930235137.0B96312894E@neal.il.is.s.u-tokyo.ac.jp> Message-ID: On Fri, 1 Oct 2004 kameyama @ pccluster.org wrote: Dear Sir, Even installing the kernel, the errors persist when I try to compile for example laplace.c under scash: [mario @ sol laplace.c]# Make cd obj.i386-redhat8-linux2_4;VPATH=.. make all BUILD=/opt/score/lib/build host_nickname=i386-redhat8-linux2_4 DIST= make[1]: Entering directory `/local/blast/opt/score5.8.0/example/scash/laplace.c/obj.i386-redhat8-linux2_4' /opt/score/example/scash/laplace.c /opt/score/bin/scorecc -Wall -Wno-implicit -scash -O `case "gnu-c" in gnu-c|g++|mpc++) echo -static;; c|c++) echo -Bstatic;; esac` -o laplace_c.exe laplace_c.o -lm /opt/score/lib/i386-redhat8-linux2_4/libscash.a(scash_etc.o): In function `scash_fatal': scash_etc.o(.text+0x2d): `sys_errlist' is deprecated; use `strerror' or `strerror_r' instead /opt/score/lib/i386-redhat8-linux2_4/libpm.a(pm.o): In function `pmInitDebug': /opt/score/score-src/SCore/pm2/common/obj.i386-redhat8-linux2_4/../pm.c:100: undefined reference to `composite_open_device' /opt/score/score-src/SCore/pm2/common/obj.i386-redhat8-linux2_4/../pm.c:100: undefined reference to `composite_attach_context' /opt/score/lib/i386-redhat8-linux2_4/libpm.a(pm.o): In function `pmDebug': /opt/score/score-src/SCore/pm2/common/obj.i386-redhat8-linux2_4/../pm.c:120: undefined reference to `shmem_open_device' /opt/score/score-src/SCore/pm2/common/obj.i386-redhat8-linux2_4/../pm.c:118: undefined reference to `shmem_attach_context' collect2: ld returned 1 exit status make[1]: *** [laplace_c.exe] Error 1 make[1]: Leaving directory `/local/blast/opt/score5.8.0/example/scash/laplace.c/obj.i386-redhat8-linux2_4' make: *** [srcdir-all] Error 2 Attached to this e-mail are the files scash.build and score.build. Could you give me any hint on how to solve the linking problems above? Thanks in advance, Mario > In article Mario Donato Marino wrotes: > > The archive score.build is attached to this e-mail. The > > problems are about line 239. What should I modify to solve them? > > Please install kernel source rpm. > > PM program use kernel structure spinlock_t and more, > This definitions are found under /usr/include/asm on Redhat 7.3 or before. > But there are not found on redhat 8.0 or later. > So PM use real kernel header file under /usr/src/linux2.4/include. > But your host is not found kernel source. > > from Kameyama Toyohisa > _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From kameyama @ pccluster.org Fri Oct 1 20:49:58 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Fri, 01 Oct 2004 20:49:58 +0900 Subject: [SCore-users-jp] Re: [SCore-users] doubt on Score rebuilding and compile a program In-Reply-To: Your message of "Fri, 01 Oct 2004 08:16:52 JST." Message-ID: <20041001114522.4667112894E@neal.il.is.s.u-tokyo.ac.jp> In article Mario Donato Marino wrotes: > > > On Fri, 1 Oct 2004 kameyama @ pccluster.org wrote: > Dear Sir, > > Even installing the kernel, the errors persist when I try to > compile for example laplace.c under scash: Where do you install kernel source on the host? SCore assume kernel source under /usr/src/linux-2.4. And if you install kernel source rpm, (kernel-source-2.4.18-14.i386.rpm if redhat 8.0) the kernel source is installed under this directory. About your log file, the compiler include /usr/include/asm/bitops.h. But if you install kernel-source rpm, the compiler include /usr/src/linux-2.4/include/asm/bitops.h insted of /usr/include/asm/bitops.h. from Kameyama Toyohisa _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From mario @ regulus.pcs.usp.br Fri Oct 1 21:47:43 2004 From: mario @ regulus.pcs.usp.br (Mario Donato Marino) Date: Fri, 1 Oct 2004 09:47:43 -0300 (BRT) Subject: [SCore-users-jp] Re: [SCore-users] doubt on Score rebuilding and compile a program In-Reply-To: <20041001114522.4667112894E@neal.il.is.s.u-tokyo.ac.jp> References: <20041001114522.4667112894E@neal.il.is.s.u-tokyo.ac.jp> Message-ID: On Fri, 1 Oct 2004 kameyama @ pccluster.org wrote: Dear Sir, > > Where do you install kernel source on the host? > SCore assume kernel source under /usr/src/linux-2.4. > And if you install kernel source rpm, > (kernel-source-2.4.18-14.i386.rpm if redhat 8.0) > the kernel source is installed under this directory. The kernel installed is the kernel-source-score-2.4.21-2SCORE and it was installed with rpm. So, the directory is /usr/src/linux-2.4.21score. Is there any problem to install kernel-source-score-2.4.21-2SCORE instead of linux-2.4? Thanks, Mario > > About your log file, the compiler include /usr/include/asm/bitops.h. > But if you install kernel-source rpm, the compiler include > /usr/src/linux-2.4/include/asm/bitops.h insted of /usr/include/asm/bitops.h. > > from Kameyama Toyohisa > _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From MAILER-DAEMON @ ns1.sanko.ac.jp Mon Oct 4 03:01:51 2004 From: MAILER-DAEMON @ ns1.sanko.ac.jp (Mail Delivery Subsystem) Date: Mon, 4 Oct 2004 03:01:51 +0900 Subject: [SCore-users-jp] [SCore-users] Virus detected Message-ID: <20041004.030150.93702462@nk-create.sanko.ac.jp> MTA has detected viruses in e-mail sent from you. あなたのメールアドレスから送信された電子メール内にウィルスを検出しました。 ウィルスが送信者を偽っている可能性もありますが、念のためお知らせいたします。 ウィルスに感染している疑いがある場合は、ウィルスのパターンファイルが PC起動時に更新される場合は、直ちに、パソコンを再起動し、パターンファイルを 最新にしてハードディスク内のウィルスチェックを行ってください。 ウィルスが駆除できない場合は、社内のヘルプデスクやシステム管理者などの ウィルス担当者までご連絡お願いいたします。 _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From kameyama @ pccluster.org Mon Oct 4 09:17:48 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Mon, 04 Oct 2004 09:17:48 +0900 Subject: [SCore-users-jp] Re: [SCore-users] doubt on Score rebuilding and compile a program In-Reply-To: Your message of "Fri, 01 Oct 2004 09:47:43 JST." Message-ID: <20041004001304.E872412894E@neal.il.is.s.u-tokyo.ac.jp> In article Mario Donato Marino wrotes: > > > > Where do you install kernel source on the host? > > SCore assume kernel source under /usr/src/linux-2.4. > > And if you install kernel source rpm, > > (kernel-source-2.4.18-14.i386.rpm if redhat 8.0) > > the kernel source is installed under this directory. > The kernel installed is the kernel-source-score-2.4.21-2SCORE and it was > installed with rpm. So, the directory is /usr/src/linux-2.4.21score. > Is there any problem to install kernel-source-score-2.4.21-2SCORE instead > of linux-2.4? We assume to install ALL rpm packages of the distribution. http://www.pccluster.org/score/dist/score/html/en/installation/redhat-settings.html So kernel-source-score-2.4.21-2SCORE is not link to /usr/src/linux-2.4 to avoid to conflict Original distribution's kernel source file. If you don't install distribution's kernel source, please execute following command to link /usr/src/linux-2.4: # cd /usr/src # ln -s /usr/src/linux-2.4.21score /usr/src/linux-2.4 from Kameyama Toyohisa _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From mokada @ itc.pref.tokushima.jp Mon Oct 4 10:01:49 2004 From: mokada @ itc.pref.tokushima.jp (M.Okada) Date: Mon, 4 Oct 2004 10:01:49 +0900 Subject: [SCore-users-jp] カーネルのインストールについて。 Message-ID: <000f01c4a9ad$ba8521e0$180714ac@obaq> This is a multi-part message in MIME format. ------=_NextPart_000_000B_01C4A9F9.2A5C0100 Content-Type: text/plain; charset="iso-2022-jp" Content-Transfer-Encoding: 7bit 亀山 様 前略 岡田です、お世話になります。 (A) http://www.pccluster.org/ の「RPMファイルによるインストール」に関して、 「SCore Linux Kernelのインストール」のページには、 Pentium アーキテクチャの場合 (1) # cd /opt/score.work (2) # rpm -U kernel-2.4.21-*SCORE.i586.rpm (3) # rpm -U kernel-smp-2.4.21-*SCORE.i586.rpm と書かれています。この(2)と(3)を実行するとgrub.confには二つの カーネル登録がなされてしまいます。/boot/vmlinuz***は一つしか システムにロードされませんので、意味がよくりません。 (2)も(3)はどちらか一方という意味でしょうか? それともも両方 とも実行しなければならないのでしょうか?  もし、両方なら、何故なのでしょうか? ちなみに、マザーボード上に一個のPentium CPUが乗っている 物を使っています。 (B) 「RedHat Linux 7.3 カーネルの変更」のページには、make distclean... から始まる一連のカーネルジェネレーションの後、 # /sbin/new-kernel-pkg --mkinitrd --depmod --install 2.4.21-2SCOREcustom とすると書かれていますが、実行後、initrdが作成されません。 特にエラー表示もありません。 何故なのでしょうか? 通常は # /sbin/mkinitrd /boot/initrd-**** -custom としますが。。。。 これでは何故いけないのでしょうか? 草々 ------=_NextPart_000_000B_01C4A9F9.2A5C0100 Content-Type: text/html; charset="iso-2022-jp" Content-Transfer-Encoding: quoted-printable
=1B$B55;3!!MM=1B(B
 
=1B$BA0N,!!2,ED$G$9!"$*@$OC$K$J$j$^$9!#=1B(B
 
=1B$B!J#A!K=1B(B
http://www.pccluster.org/=1B$B!!$N!V=1B(BRPM=1B$B%U%!%$%k$K$h$k%$%s%9%H!<%k!W$K4X$7$F!"=1B= (B
=1B$B!V=1B(BSCore Linux = Kernel=1B$B$N%$%s%9%H!<%k!W=1B(B=1B$B$N%Z!<%8$K$O!"=1B(B
 
Pentium = =1B$B%"!<%-%F%/%A%c$N>l9g=1B(B
   (1) # cd = /opt/score.work=20
   (2) # rpm -U=20 kernel-2.4.21-*SCORE.i586.rpm
   (3) # rpm -U=20 kernel-smp-2.4.21-*SCORE.i586.rpm
 
=1B$B$H=3Dq$+$l$F$$$^$9!#$3$N=1B(B(2)=1B$B$H=1B(B(3)=1B$B$r
=1B$B%+!<%M%kEPO?$,$J$5$l$F$7$^$$$^$9!#=1B(B/boot/vmlinuz***=1B$= B$O0l$D$7$+=1B(B
=1B$B%7%9%F%`$K%m!<%I$5$l$^$;$s$N$G!"0UL#$,$h$/$j$^$;$s!#=1B(B
 
(2)=1B$B$b=1B(B(3)=1B$B$O$I$A$i$+0lJ}$H$$$&0UL#$G$7$g$&$+!)!!$=3D= $l$H$b$bN>J}=1B(B
=1B$B$H$b=1B$B$J$i$J$$$N$G$7$g$&$+!)!!=1B(B
=1B$B$b$7!"N>J}$J$i!"2?8N$J$N$G$7$g$&$+!)=1B(B
 
=1B$B$A$J$_$K!"%^%6!<%\!<%I>e$K0l8D$N=1B(BPentium=1B$B!!=1B(BCPU= =1B$B$,>h$C$F$$$k=1B(B
=1B$BJ*$r;H$C$F$$$^$9!#=1B(B
 
 
=1B$B!J#B!K=1B(B
=1B$B!V=1B(BRedHat Linux 7.3 = =1B$B%+!<%M%k$NJQ99!W$N%Z!<%8$K$O!"=1B(Bmake=20 distclean...
=1B$B$+$i;O$^$k0lO"$N%+!<%M%k%8%'%M%l!<%7%g%s$N8e!"=1B(B<= /DIV>
 
 # /sbin/new-kernel-pkg = --mkinitrd=20 --depmod --install 2.4.21-2SCOREcustom
 
 
=1B$B$H$9$k$H=3Dq$+$l$F$$$^$9$,!"
=1B$BFC$K%(%i!
 
=1B$BDL>o$O!!=1B(B# = /sbin/mkinitrd =20 /boot/initrd-**** -custom =1B$B$H$7$^$9$,!#!#!#!#=1B(B
=1B$B$3$l$G$O2?8N$$$1$J$$$N$G$7$g$&$+!)=1B(B
=1B$BAp!9=1B(B
 
 
 
 
 
------=_NextPart_000_000B_01C4A9F9.2A5C0100-- From kameyama @ pccluster.org Mon Oct 4 11:00:45 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Mon, 04 Oct 2004 11:00:45 +0900 Subject: [SCore-users-jp] カーネルのインストールについて。 In-Reply-To: Your message of "Mon, 04 Oct 2004 10:01:49 JST." <000f01c4a9ad$ba8521e0$180714ac@obaq> Message-ID: <20041004015601.B840D12894E@neal.il.is.s.u-tokyo.ac.jp> 亀山です. In article <000f01c4a9ad$ba8521e0$180714ac @ obaq> "M.Okada" wrotes: > (A) > http://www.pccluster.org/ の「RPMファイルによるインストール」に関して、 > 「SCore Linux Kernelのインストール」のページには、 > > Pentium アーキテクチャの場合 > (1) # cd /opt/score.work > (2) # rpm -U kernel-2.4.21-*SCORE.i586.rpm > (3) # rpm -U kernel-smp-2.4.21-*SCORE.i586.rpm > > と書かれています。この(2)と(3)を実行するとgrub.confには二つの > カーネル登録がなされてしまいます。/boot/vmlinuz***は一つしか > システムにロードされませんので、意味がよくりません。 両方 install した場合, lilo あるいは groub で boot 時に kernel が 選択できますので, SMP で立ち上がらないときは別の方で立ち上げて みる, という使い方ができおます. > > (2)も(3)はどちらか一方という意味でしょうか? それともも両方 > とも実行しなければならないのでしょうか?  > もし、両方なら、何故なのでしょうか? > > ちなみに、マザーボード上に一個のPentium CPUが乗っている > 物を使っています。 CPU が一つでしたら, SMP のほうは不要です. kernel-2.4.21-*SCORE.i686.rpm のみで構いません. > (B) > 「RedHat Linux 7.3 カーネルの変更」のページには、make distclean... > から始まる一連のカーネルジェネレーションの後、 > > # /sbin/new-kernel-pkg --mkinitrd --depmod --install 2.4.21-2SCOREcustom > > > とすると書かれていますが、実行後、initrdが作成されません。 > 特にエラー表示もありません。 何故なのでしょうか? initrd は kernel が boot するとき, root file system を mount するときに root file system が必要としている module を load するために使用します. これは, kernel を作成するときに, 何を builtin にし, 何を module にするかに依存しますが, たとえば, redhat 7.3 に付属の kernel は IDE と ext2 は builtin にしますので, root file system が IDE 上の ext2 file system であれば initrd を作成する必要がありません. この場合, initrd は不要なので作成されません. > 通常は # /sbin/mkinitrd /boot/initrd-**** -custom としますが。。。。 > これでは何故いけないのでしょうか? new-kernel-pkg は mkinitrd のほかに depmod と grub へのエントリの 追加もやってくれます. from Kameyama Toyohisa From iida @ st-systems.co.jp Tue Oct 5 12:16:58 2004 From: iida @ st-systems.co.jp (Masayasu Iida) Date: Tue, 05 Oct 2004 12:16:58 +0900 Subject: [SCore-users-jp] SCoreのソースコンパイル時のコンパイルオプションについて Message-ID: <4162122A.7050006@st-systems.co.jp> いつもお世話になっております。 サイエンス・テクノロジー・システムズの飯田です。 SCoreをソースからコンパイルする際、 SCoreのソースに含まれるMPICHをIntelコンパイラの 最適化オプションをつけてコンパイルしたいのですが、 可能でしょうか。 SCoreをソースからコンパイルするときのオプションを 指定する方法がございましたらご教授いただけますと 幸いです。 ------------------------------------------------ 飯田 昌康 サイエンス・テクノロジー・システムズ株式会社 東日本営業部 営業技術グループ マネージャー Tel:03-5774-6833 Fax:03-5774-5180 E-mail: iida @ st-systems.co.jp Web: http://www.st-systems.co.jp 〒150-0002 東京都渋谷区渋谷1-20-1 三進ビル4F ------------------------------------------------ From score-users-admin @ pccluster.org Tue Oct 5 23:43:01 2004 From: score-users-admin @ pccluster.org (=?iso-2022-jp?b?c2NvcmUtdXNlcnMtYWRtaW4gGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Tue, 05 Oct 2004 23:43:01 +0900 Subject: [SCore-users-jp] Your message to SCore-users awaits moderator approval Message-ID: <20041005144301.16387.63230.Mailman@www.pccluster.org> Your mail to 'SCore-users' with the subject Is being held until the list moderator can review it for approval. The reason it is being held: Message has a suspicious header Either the message will get posted to the list, or you will receive notification of the moderator's decision. From kameyama @ pccluster.org Wed Oct 6 15:44:54 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Wed, 06 Oct 2004 15:44:54 +0900 Subject: [SCore-users-jp] SCoreのソースコンパイル時のコンパイルオプションについて In-Reply-To: Your message of "Tue, 05 Oct 2004 12:16:58 JST." <4162122A.7050006@st-systems.co.jp> Message-ID: <20041006064003.62F3012894C@neal.il.is.s.u-tokyo.ac.jp> 亀山です. In article <4162122A.7050006 @ st-systems.co.jp> Masayasu Iida wrotes: > SCoreをソースからコンパイルする際、 > SCoreのソースに含まれるMPICHをIntelコンパイラの > 最適化オプションをつけてコンパイルしたいのですが、 > 可能でしょうか。 ソースがありますので, 不可能ではないですけど, 標準的手段としては 用意していません. SCore 5.8.0 で標準として使用する 1.2.5 のソースは score-src/runtime/mpi/mpich-1.2.5 にあります. mpich ではコンパイルオプションは configure のときに指定するのですが, SCore では, その指定を mpi_make.sh の中で行っています. 最適化オプションは -optcc, -optf77 で渡しており, 現在は -optcc=-O4 -optf77=-O としています. (Intel コンパイラの場合は -O4 は使用できませんが scorecc で -O3 に変換しています.) 基本的にはこの script を書き換えるか, (書き換える場合はほかの compiler についてもこの script を使用 することに注意してください.) これと Makefile をもとに, 直接 configure を呼び出して, configure の -optcc, -optf77 を 設定して make するかになると思います. from Kameyama Toyohisa From nick @ streamline-computing.com Thu Oct 7 19:16:57 2004 From: nick @ streamline-computing.com (Nick Birkett) Date: 07 Oct 2004 11:16:57 +0100 Subject: [SCore-users-jp] [SCore-users] sceptic scstest bugs 5.6.1 ? Message-ID: <1097144217.1567.30.camel@zeralda.streamline> Dear Score users, I would like to run a script from my batch jobs to test that the hosts and pm network is up before the job is run. (1) Testing available hosts are up: sceptic -r 1 -b -n -f hosts comp00 comp09 2 hosts alive. However comp09 is currently switched off, so suspect a bug with -n option. sceptic -b -r 1 -f hosts comp09 1 host not responding. I can use this without the -n option. (2) Testing the pm network is available: scout -F hosts -e /opt/score/deploy/scstest -network ethernet SCOUT: Spawning done. SCSTEST: BURST on ethernet(chan=0,ctx=0,len=16) 50 K packets. works but scout -F hosts -e /opt/score/deploy/scstest -network ethernet -count 2 SCOUT: Spawning done. SCSTEST: BURST on ethernet(chan=0,ctx=0,len=16) comp01( 1) burst: pmGetSendBuffer: Connection timed out(110) SCOUT: Session done. The -count option to scstest causes a problem debug-output : sccomp @ sirius SRC]$ export PM_DEBUG=3 [sccomp @ sirius SRC]$ scout -F hosts -e /opt/score/deploy/scstest -network ethernet -count 2 SCOUT: Spawning done. ethernet_open_device(): -config /var/scored/scoreboard/sirius.0000V2004DyL pmEthernetOpenDevice: Library version $Id: pm_ethernet.c,v 1.65 2003/09/29 12:45:55 s-sumi Exp $ pmEthernetReadConfig(0x8458a68, unit, 1): set unit number "1" (MAX: 4). pmEthernetReadConfig(0x8458a68, checksum, 1): set checksum "1" on. pmEthernetReadConfig(0x8458a68, intreap, 1): set intreap "1" header on. pmEthernetReadConfig(0x8458a68, maxnsend, 16): set maxnsend "16". pmEthernetReadConfig(0x8458a68, backoff, 2048): set backoff "2048" usec. pmEthernetOpenDevice("/var/scored/scoreboard/sirius.0000V2004DyL", 0xbffff3f4): pmEthernetMapEthernet(1, 0xbffff138): 0 self comp00.comlab.ox.ac.uk n 0 of 16 nodes ethernet_open_device(): -config /var/scored/scoreboard/sirius.0000V2004DyL pm: CPU Clock=3065.66MHz pmEthernetOpenDevice: Driver version $Id: pm_ethernet_dev.c,v 1.3 2003/09/22 10:40:55 s-sumi Exp $ ethernet_open_device(): success [0](0)pmEthernetRegisterProc(): proc 5802(5802), tid 5802 [0](0) pmEthernetAssociateNodes(0x845b230, 0x811ba00, 2):ndev=1 [0](0) pmEthernetBindChannel(0x845b230, 0, 0): called SCSTEST: BURST on ethernet(chan=0,ctx=0,len=16) pmEthernetOpenDevice: Library version $Id: pm_ethernet.c,v 1.65 2003/09/29 12:45:55 s-sumi Exp $ pmEthernetReadConfig(0x8458a68, unit, 1): set unit number "1" (MAX: 4). pmEthernetReadConfig(0x8458a68, checksum, 1): set checksum "1" on. pmEthernetReadConfig(0x8458a68, intreap, 1): set intreap "1" header on. pmEthernetReadConfig(0x8458a68, maxnsend, 16): set maxnsend "16". pmEthernetReadConfig(0x8458a68, backoff, 2048): set backoff "2048" usec. pmEthernetOpenDevice("/var/scored/scoreboard/sirius.0000V2004DyL", 0xbffff3f4): pmEthernetMapEthernet(1, 0xbffff138): 0 self comp01.comlab.ox.ac.uk n 1 of 16 nodes pm: CPU Clock=3065.5MHz pmEthernetOpenDevice: Driver version $Id: pm_ethernet_dev.c,v 1.3 2003/09/22 10:40:55 s-sumi Exp $ ethernet_open_device(): success [1](0)pmEthernetRegisterProc(): proc 5279(5279), tid 5279 [1](0) pmEthernetAssociateNodes(0x845b230, 0x811ba00, 2):ndev=1 [1](0) pmEthernetBindChannel(0x845b230, 0, 0): called comp01( 1) burst: pmGetSendBuffer: Connection timed out(110) [1](0) pmEthernetControlSend(0x845b230, 0): Called SCOUT: Session done. Best wishes, Nick _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From krishnam @ t-online.de Tue Oct 12 19:13:26 2004 From: krishnam @ t-online.de (=?Windows-1251?B?0OXq6+Ds7e7lIO/w5eTr7ubl7ejl?=) Date: Tue, 12 Oct 2004 10:13:26 +0000 Subject: [SCore-users-jp] [SCore-users] =?Windows-1251?B?0OXq6+Ds4Dog1c7QwsDSyN8hISEgzP7t9eXtISEhIMrg9+Xx8uLl7e376SDu8uT7?= =?Windows-1251?B?9SEhIQ==?= Message-ID: <1482075021.20041012101826@> ХОРВАТИЯ!!! Мюнхен!!! Качественный отдых!!! Туристское агентство "Отдохни с Акулой!" Лучшие отели по лучшим ценам! Отдых на Истринском полуострове! Вылеты по воскресеньям и четвергам на 10 ночей/11 дней и 11 ночей/12 дней Отели (цены даны на человека в евро): Sol Umag 4* (полупансион) 27.06.04 (11н.)2-местный - 777, 1-но местный - 1299 Sol Aurora 4*(полупансион) 27.06.04 (11н.)2-местный - 801, 1-но местный - 1407 Sol Elit Koralj 4*(полупансион) 27.06.04 (11н.)2-местный - 814, 1-но местный - 1434 В стоимость тура входит: -авиаперелет Москва-Пула-Москва -трансферты -проживание -питание -медицинская страховка Германия!!! Экскурсионные туры: Германия ?Мюнхен с выездом в Альпы? Даты заездов: 07.07, 16. 07, 28.07, 11.08, 20.08, 09.09 Стоимость тура: 5 дней - 620 евро, 7 дней - 680 евро, 8 дней ? 690 евро. В стоимость тура входит: -авиаперелет Москва-Мюнхен-Москва -трансферты -проживание -питание -экскурсии: обзорная по Мюнхену, выезд в Альпы с посещением замков. -медицинская страховка В нашем офисе Вы можете ознакомиться с экскурсиооными турами по Европе! Предлагаем качественный отдых на море в отеля 4-5 *, гарантированные места! Поможем оформить загранпаспорт в удобные для вас сроки! Туристское агентство "Отдохни с Акулой!" Москва, ул. Костякова, д. 12, стр. 6 Телефон/факс: (095) 7-888-769 Телефон для оперативной связи: 8-926-230-68-68 Пожалуйста, не присылайте писем на обратный адрес! Просим обращаться по телефонам! Мы хотим сделать рекламные рассылки цивилизованными. Поэтому мы собираемся писать в начале наших писем в графе "От" - Рекламное предложение, в графе "тема" - Реклама: (название рассылаемой темы, например, туризм, ремонт и др.) Если Вы не желаете получать рекламные предложения по электронной почте, вы можете удалить свой адрес из нашей базы данных, прислав нам письмо с вашим адресом указаным в теме письма, по адресу: nevajno2000 @ yahoo.com Вы можете быть уверены, что мы на самом деле удалим Ваш почтовый адрес из нашей базы данных. Чистка базы производится 20 числа каждого месяца. _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From nick @ streamline-computing.com Tue Oct 12 17:59:51 2004 From: nick @ streamline-computing.com (Nick Birkett) Date: 12 Oct 2004 09:59:51 +0100 Subject: [SCore-users-jp] [SCore-users] Network trunking problems Message-ID: <1097571591.15000.120.camel@zeralda.streamline> We need some help on this. I am getting the same problems as I got when I tried this before. Each single network performs extremely well. But using PMB on 2x gigabit, the Sendrecv is very poor and uneven compared to single gigabit. Hardware set up: Smicro dual Xeon front end, 8x Smicro dual Xeon 3.06GHz cpus comp nodes, 4096 Mbytes 2x inboard e1000 1x offboard e1000 workstation card in PCI-X slot 3 x Nortel baystack Gbit switches (not linked) 3 independent networks eth0,eth1,eth2 System network is eth1 - connects Front end and compute nodes. Message networks eth0,eth2 eth1,eth2 or the onboard gbit eth0 is offboard gbit. Software: RedHat 9, Score 5.8.1 (compiled from source received end of Sept 2004). Kernel 2.4.21-2SCORE smp , Intel e1000 driver, v 5.2.39 . I have also tried it using Score 5.6.1 compiled for RedHat 9 and with Score 5.4.1 on RedHat 7.3, I can run jobs on all 3 networks and dual network: scout -F hosts -e scrun -nodes=2x1,network=ethernet0 ./PMB-MPI1 Pingpong Sendrecv works fine - see ethernet0.out. scout -F hosts -e scrun -nodes=2x1,network=ethernet1 ./PMB-MPI1 Pingpong Sendrecv works fine scout -F hosts -e scrun -nodes=2x1,network=ethernet2 ./PMB-MPI1 Pingpong Sendrecv works fine - see ethernet2.out scout -F hosts -e scrun -nodes=2x1,network=ethernetx2 ./PMB-MPI1 Pingpong Sendrecv problems !! Attached files: Score configuration files: score-etc-5.8.1.tgz Output for PMB for ethernet0,ethernet2 and trunked ethernetx2: ethernet0.out ethernet2.out ethernetx2.out Info files from cat /proc/pm : eth0.info eth2.info I have tried the following parameters: maxnsend 16,32 backoff 1024,2048 4096 I have also tried with Jumbo frames set on eth0, eth2 network (MTU=9000). The attached results are with Jumbo frames off. I have also tested with interrupt reaping off. This was much worse than Intreap 1 . Any ideas ? Best wishes, Nick -- ---- PM Ethernet 0330 Version : "$Id: pm_ethernet_dev.c,v 1.5 2004/04/22 04:30:17 kameyama Exp $" Device : eth0 Irq : 0 MTU : 1468 Bytes Maxnodes : 512 MaxContext : 16 Intreap : on Checksum : on Dev error : 3 Header err : 0 Header cksum err: 0 Data cksum err : 0 Underrun err : 0 ---- PM Ethernet 0330 Version : "$Id: pm_ethernet_dev.c,v 1.5 2004/04/22 04:30:17 kameyama Exp $" Device : eth2 Irq : 0 MTU : 1468 Bytes Maxnodes : 512 MaxContext : 16 Intreap : on Checksum : on Dev error : 1 Header err : 0 Header cksum err: 0 Data cksum err : 0 Underrun err : 0 -- Nick Birkett Streamline Computing Ltd -------------- next part -------------- テキスト形式以外の添付ファイルを保管しました... ファイル名: score-etc-5.8.1.tgz 型: application/x-gzip サイズ: 3799 バイト 説明: 無し URL: -------------- next part -------------- テキスト形式以外の添付ファイルを保管しました... ファイル名: ethernet0.out 型: application/octet-stream サイズ: 5310 バイト 説明: 無し URL: -------------- next part -------------- テキスト形式以外の添付ファイルを保管しました... ファイル名: ethernet2.out 型: application/octet-stream サイズ: 5310 バイト 説明: 無し URL: -------------- next part -------------- テキスト形式以外の添付ファイルを保管しました... ファイル名: ethernetx2.out 型: application/octet-stream サイズ: 5310 バイト 説明: 無し URL: From s-sumi @ flab.fujitsu.co.jp Tue Oct 12 21:22:57 2004 From: s-sumi @ flab.fujitsu.co.jp (Shinji Sumimoto) Date: Tue, 12 Oct 2004 21:22:57 +0900 (JST) Subject: [SCore-users-jp] [SCore-users] Network trunking problems In-Reply-To: <1097571591.15000.120.camel@zeralda.streamline> References: <1097571591.15000.120.camel@zeralda.streamline> Message-ID: <20041012.212257.607954971.s-sumi@flab.fujitsu.co.jp> Dear Nick. How about the following parameter? ======================= maxnsend 16 backoff 800 ======================= Here are some results on Intel Dual Giga-E card and SuperMicro MB using MTU 1.5K, but the results are not good. I will investigate the problem. Shinji. *** Dual Giga-E **** ============================================== SCore-D 5.8.1 connected. #--------------------------------------------------- # PALLAS MPI Benchmark Suite V2.2, MPI-1 part #--------------------------------------------------- # Date : Tue Oct 12 20:55:46 2004 # Machine : i686# System : Linux # Release : 2.4.21score5.8 # Version : #2 SMP Mon Sep 6 13:47:39 JST 2004 # # Minimum message length in bytes: 0 # Maximum message length in bytes: 4194304 # # MPI_Datatype : MPI_BYTE # MPI_Datatype for reductions : MPI_FLOAT # MPI_Op : MPI_SUM # # # List of Benchmarks to run: # PingPong # Sendrecv #--------------------------------------------------- # Benchmarking PingPong # ( #processes = 2 ) # ( 2 additional processes waiting in MPI_Barrier) #--------------------------------------------------- #bytes #repetitions t[usec] Mbytes/sec 0 1000 15.35 0.00 1 1000 15.50 0.06 2 1000 15.49 0.12 4 1000 15.72 0.24 8 1000 15.89 0.48 16 1000 15.93 0.96 32 1000 16.35 1.87 64 1000 17.67 3.45 128 1000 19.67 6.20 256 1000 23.33 10.46 512 1000 33.99 14.36 1024 1000 45.98 21.24 2048 1000 65.63 29.76 4096 1000 80.81 48.34 8192 1000 103.38 75.57 16384 1000 177.73 87.92 32768 1000 278.15 112.35 65536 1000 450.74 138.66 131072 1000 830.70 150.48 262144 640 1578.08 158.42 524288 320 3037.10 164.63 1048576 160 6054.12 165.18 2097152 80 11752.26 170.18 4194304 40 27332.49 146.35 #----------------------------------------------------------------------------- # Benchmarking Sendrecv # ( #processes = 2 ) # ( 2 additional processes waiting in MPI_Barrier) #----------------------------------------------------------------------------- #bytes #repetitions t_min[usec] t_max[usec] t_avg[usec] Mbytes/sec 0 1000 15.96 15.97 15.97 0.00 1 1000 16.14 16.15 16.14 0.12 2 1000 16.23 16.23 16.23 0.23 4 1000 16.46 16.47 16.46 0.46 8 1000 16.64 16.64 16.64 0.92 16 1000 16.61 16.61 16.61 1.84 32 1000 16.99 17.00 16.99 3.59 64 1000 18.48 18.48 18.48 6.60 128 1000 20.40 20.42 20.41 11.96 256 1000 24.24 24.25 24.24 20.13 512 1000 31.91 31.94 31.93 30.58 1024 1000 46.10 46.11 46.11 42.36 2048 1000 112.50 112.52 112.51 34.71 4096 1000 476.83 478.01 477.42 16.34 8192 1000 495.49 495.52 495.50 31.53 16384 1000 2214.85 2216.06 2215.45 14.10 32768 1000 2423.52 2425.49 2424.51 25.77 65536 1000 2701.98 2703.39 2702.69 46.24 131072 1000 3396.19 3396.76 3396.48 73.60 262144 640 4823.91 4824.50 4824.20 103.64 524288 320 7815.02 7816.31 7815.66 127.94 1048576 160 13664.31 13667.36 13665.83 146.33 2097152 80 25498.25 25505.10 25501.68 156.83 4194304 40 54413.87 54424.60 54419.23 146.99 #----------------------------------------------------------------------------- # Benchmarking Sendrecv # ( #processes = 4 ) #----------------------------------------------------------------------------- #bytes #repetitions t_min[usec] t_max[usec] t_avg[usec] Mbytes/sec 0 1000 16.98 16.99 16.99 0.00 1 1000 17.26 17.27 17.26 0.11 2 1000 17.30 17.30 17.30 0.22 4 1000 17.45 17.46 17.46 0.44 8 1000 17.50 17.52 17.51 0.87 16 1000 17.49 17.50 17.49 1.74 32 1000 18.00 18.02 18.01 3.39 64 1000 19.44 19.45 19.44 6.28 128 1000 21.30 21.32 21.31 11.45 256 1000 25.91 25.94 25.92 18.82 512 1000 32.59 32.62 32.60 29.94 1024 1000 47.36 47.40 47.38 41.20 2048 1000 68.89 68.94 68.92 56.66 4096 1000 82.46 82.48 82.47 94.72 8192 1000 111.64 111.71 111.68 139.87 16384 1000 238.85 238.91 238.89 130.80 32768 1000 447.44 447.49 447.46 139.67 65536 1000 800.36 800.49 800.42 156.16 131072 1000 1525.62 1526.29 1525.93 163.80 262144 640 2985.35 2987.49 2986.53 167.36 524288 320 5966.47 5975.08 5971.48 167.36 1048576 160 11971.57 11994.16 11984.03 166.75 2097152 80 24619.02 24748.15 24685.33 161.63 4194304 40 50143.33 50580.92 50363.74 158.16 #===================================================== # # Thanks for using PMB2.2 # # The Pallas team kindly requests that you # give us as much feedback for PMB as possible. # # It would be very helpful when you sent the # output tables of your run(s) of PMB to # # ####################### # # # # # pmb @ pallas.com # # # # # ####################### # # You might also add # # - personal information (institution, motivation # for using PMB) # - basic information about the machine you used # (number of CPUs, processor type e.t.c.) # #===================================================== *** Single Giga-E **** ===================================================================== SCore-D 5.8.1 connected. #--------------------------------------------------- # PALLAS MPI Benchmark Suite V2.2, MPI-1 part #--------------------------------------------------- # Date : Tue Oct 12 20:56:53 2004 # Machine : i686# System : Linux # Release : 2.4.21score5.8 # Version : #2 SMP Mon Sep 6 13:47:39 JST 2004 # # Minimum message length in bytes: 0 # Maximum message length in bytes: 4194304 # # MPI_Datatype : MPI_BYTE # MPI_Datatype for reductions : MPI_FLOAT # MPI_Op : MPI_SUM # # # List of Benchmarks to run: # PingPong # Sendrecv #--------------------------------------------------- # Benchmarking PingPong # ( #processes = 2 ) # ( 2 additional processes waiting in MPI_Barrier) #--------------------------------------------------- #bytes #repetitions t[usec] Mbytes/sec 0 1000 18.47 0.00 1 1000 18.47 0.05 2 1000 18.39 0.10 4 1000 18.68 0.20 8 1000 18.74 0.41 16 1000 18.90 0.81 32 1000 19.38 1.57 64 1000 20.89 2.92 128 1000 22.81 5.35 256 1000 26.85 9.09 512 1000 34.64 14.09 1024 1000 49.94 19.55 2048 1000 67.83 28.79 4096 1000 86.55 45.13 8192 1000 119.63 65.31 16384 1000 223.56 69.89 32768 1000 362.53 86.20 65536 1000 652.64 95.77 131072 1000 1215.95 102.80 262144 640 2317.14 107.89 524288 320 4610.97 108.44 1048576 160 8991.56 111.22 2097152 80 17884.11 111.83 4194304 40 35684.34 112.09 #----------------------------------------------------------------------------- # Benchmarking Sendrecv # ( #processes = 2 ) # ( 2 additional processes waiting in MPI_Barrier) #----------------------------------------------------------------------------- #bytes #repetitions t_min[usec] t_max[usec] t_avg[usec] Mbytes/sec 0 1000 19.32 19.33 19.33 0.00 1 1000 19.43 19.44 19.43 0.10 2 1000 19.36 19.36 19.36 0.20 4 1000 19.76 19.77 19.77 0.39 8 1000 19.80 19.81 19.81 0.77 16 1000 19.62 19.63 19.62 1.55 32 1000 20.18 20.19 20.18 3.02 64 1000 21.95 21.95 21.95 5.56 128 1000 23.74 23.74 23.74 10.28 256 1000 27.83 27.85 27.84 17.54 512 1000 36.06 36.08 36.07 27.07 1024 1000 51.19 51.23 51.21 38.13 2048 1000 74.77 74.82 74.79 52.21 4096 1000 95.45 95.50 95.48 81.80 8192 1000 127.14 127.18 127.16 122.86 16384 1000 228.08 228.10 228.09 137.00 32768 1000 366.22 366.22 366.22 170.66 65536 1000 647.03 647.06 647.05 193.18 131072 1000 1244.26 1244.28 1244.27 200.92 262144 640 2488.19 2488.23 2488.21 200.95 524288 320 4987.30 4987.57 4987.43 200.50 1048576 160 9946.71 9946.96 9946.83 201.07 2097152 80 20048.08 20048.67 20048.38 199.51 4194304 40 42708.02 42728.23 42718.12 187.23 #----------------------------------------------------------------------------- # Benchmarking Sendrecv # ( #processes = 4 ) #----------------------------------------------------------------------------- #bytes #repetitions t_min[usec] t_max[usec] t_avg[usec] Mbytes/sec 0 1000 19.15 19.17 19.16 0.00 1 1000 19.53 19.55 19.54 0.10 2 1000 19.46 19.49 19.47 0.20 4 1000 19.52 19.55 19.54 0.39 8 1000 19.54 19.56 19.55 0.78 16 1000 19.66 19.68 19.67 1.55 32 1000 20.03 20.05 20.04 3.04 64 1000 21.53 21.56 21.54 5.66 128 1000 23.49 23.56 23.53 10.36 256 1000 27.59 27.62 27.60 17.68 512 1000 35.52 35.55 35.54 27.47 1024 1000 54.62 54.69 54.65 35.72 2048 1000 75.10 75.17 75.13 51.96 4096 1000 92.74 92.82 92.79 84.17 8192 1000 127.26 127.38 127.32 122.66 16384 1000 293.29 293.49 293.40 106.48 32768 1000 504.30 504.68 504.47 123.84 65536 1000 867.29 867.74 867.56 144.05 131072 1000 1521.44 1522.03 1521.82 164.25 262144 640 3161.80 3164.15 3163.17 158.02 524288 320 6549.42 6560.77 6555.03 152.42 1048576 160 13667.64 13712.74 13690.57 145.85 2097152 80 27897.05 28024.57 27959.47 142.73 4194304 40 57200.03 57689.10 57468.21 138.67 #===================================================== # # Thanks for using PMB2.2 # # The Pallas team kindly requests that you # give us as much feedback for PMB as possible. # # It would be very helpful when you sent the # output tables of your run(s) of PMB to # # ####################### # # # # # pmb @ pallas.com # # # # # ####################### # # You might also add # # - personal information (institution, motivation # for using PMB) # - basic information about the machine you used # (number of CPUs, processor type e.t.c.) # #===================================================== From: Nick Birkett Subject: [SCore-users-jp] [SCore-users] Network trunking problems Date: 12 Oct 2004 09:59:51 +0100 Message-ID: <1097571591.15000.120.camel @ zeralda.streamline> nick> We need some help on this. nick> nick> I am getting the same problems as I got when I tried this before. nick> nick> Each single network performs extremely well. nick> nick> But using PMB on 2x gigabit, the Sendrecv is very poor and uneven nick> compared to single gigabit. nick> nick> Hardware set up: Smicro dual Xeon front end, nick> 8x Smicro dual Xeon 3.06GHz cpus comp nodes, nick> 4096 Mbytes nick> 2x inboard e1000 nick> 1x offboard e1000 workstation card in PCI-X slot nick> nick> 3 x Nortel baystack Gbit switches (not linked) nick> 3 independent networks eth0,eth1,eth2 nick> nick> System network is eth1 - connects Front end and compute nodes. nick> Message networks eth0,eth2 nick> nick> eth1,eth2 or the onboard gbit nick> eth0 is offboard gbit. nick> nick> Software: RedHat 9, Score 5.8.1 (compiled from source received end of nick> Sept 2004). Kernel 2.4.21-2SCORE smp , Intel e1000 driver, v 5.2.39 . nick> nick> I have also tried it using Score 5.6.1 compiled for RedHat 9 nick> and with Score 5.4.1 on RedHat 7.3, nick> nick> I can run jobs on all 3 networks and dual network: nick> nick> scout -F hosts -e scrun -nodes=2x1,network=ethernet0 ./PMB-MPI1 Pingpong nick> Sendrecv nick> nick> works fine - see ethernet0.out. nick> nick> scout -F hosts -e scrun -nodes=2x1,network=ethernet1 ./PMB-MPI1 Pingpong nick> Sendrecv nick> nick> works fine nick> nick> scout -F hosts -e scrun -nodes=2x1,network=ethernet2 ./PMB-MPI1 Pingpong nick> Sendrecv nick> nick> works fine - see ethernet2.out nick> nick> scout -F hosts -e scrun -nodes=2x1,network=ethernetx2 ./PMB-MPI1 nick> Pingpong Sendrecv nick> nick> problems !! nick> nick> Attached files: nick> nick> Score configuration files: nick> score-etc-5.8.1.tgz nick> nick> Output for PMB for ethernet0,ethernet2 and trunked ethernetx2: nick> ethernet0.out nick> ethernet2.out nick> ethernetx2.out nick> nick> Info files from cat /proc/pm : nick> nick> eth0.info nick> eth2.info nick> nick> I have tried the following parameters: maxnsend 16,32 nick> backoff 1024,2048 4096 nick> nick> I have also tried with Jumbo frames set on eth0, eth2 network nick> (MTU=9000). The attached results are with Jumbo frames off. nick> nick> I have also tested with interrupt reaping off. nick> nick> This was much worse than Intreap 1 . nick> nick> nick> Any ideas ? nick> nick> Best wishes, nick> nick> Nick nick> nick> nick> -- nick> nick> nick> ---- nick> nick> nick> PM Ethernet 0330 nick> Version : "$Id: pm_ethernet_dev.c,v 1.5 2004/04/22 04:30:17 kameyama Exp $" nick> Device : eth0 nick> Irq : 0 nick> MTU : 1468 Bytes nick> Maxnodes : 512 nick> MaxContext : 16 nick> Intreap : on nick> Checksum : on nick> Dev error : 3 nick> Header err : 0 nick> Header cksum err: 0 nick> Data cksum err : 0 nick> Underrun err : 0 nick> ---- nick> nick> nick> PM Ethernet 0330 nick> Version : "$Id: pm_ethernet_dev.c,v 1.5 2004/04/22 04:30:17 kameyama Exp $" nick> Device : eth2 nick> Irq : 0 nick> MTU : 1468 Bytes nick> Maxnodes : 512 nick> MaxContext : 16 nick> Intreap : on nick> Checksum : on nick> Dev error : 1 nick> Header err : 0 nick> Header cksum err: 0 nick> Data cksum err : 0 nick> Underrun err : 0 nick> -- nick> Nick Birkett nick> Streamline Computing Ltd nick> ------ Shinji Sumimoto, Fujitsu Labs _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From kei_hata @ hotmail.com Wed Oct 13 02:04:09 2004 From: kei_hata @ hotmail.com (hata kei) Date: Wed, 13 Oct 2004 02:04:09 +0900 Subject: [SCore-users-jp] scout error on RH9 Message-ID: 初めまして、畑田と申します。 今回我々のグループで、dual Xeon のrack を5台購入しクラスタを構築することに なりました。 サーバーは計算ホストとしても使用するよう設定しております。 それぞれRedHat9をフルインストールし、カーネルをパッチをつけて2.4.21に更新し ました。 インストールはソースファイルから行いました。 まず初めに様子を見るべく2台でクラスタを作りました。 scoutのテストにおいて、 # scorehosts -l -g pcc server.pcl.org comp1.pcl.org 2 hosts found. # sceptic -v -g pcc server.pcl.org: OK comp1.pcl.org: OK All host responding. # scout -g pcc [comp1.pcl.org]: Spawn timed out. SCOUT: Session done. というエラーがでました。comp1.pcl.orgと言うのが計算ホストで、計算ホスト兼 サーバがserver.pcl.orgです。scorehosts -l -g pcc やsceptic -v -g pccではエ ラーはありませんでした。 さらに他のチェックでも # rsh-all -g pcc /opt/score/deploy/hostname-check `scorehosts pcc` 2 hosts found. server.pcl.org comp1.pcl.org comp1.pcl.org: server.pcl.org is OK comp1.pcl.org: comp1.pcl.org is OK server.pcl.org: server.pcl.org is OK server.pcl.org: comp1.pcl.org is OK # rsh-all -g pcc date server.pcl.org comp1.pcl.org server.pcl.org: Tue Oct 12 18:58:21 CEST 2004 comp1.pcl.org: Tue Oct 12 18:58:06 CEST 2004 の様なきちんとした応答がありました。 それぞれの/etc/hosts.equivや.rhostも違いがありません。NISもチェックしたので すが、問題はありませんでした。 初歩的な質問かも知れませんがよろしくお願いします。 _________________________________________________________________ 楽しい絵文字でココロ伝わるメッセンジャー http://messenger.msn.co.jp/ From kameyama @ pccluster.org Wed Oct 13 09:25:02 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Wed, 13 Oct 2004 09:25:02 +0900 Subject: [SCore-users-jp] scout error on RH9 In-Reply-To: Your message of "Wed, 13 Oct 2004 02:04:09 JST." Message-ID: <20041013001948.F351312894D@neal.il.is.s.u-tokyo.ac.jp> 亀山です. In article "hata kei" wrotes: > まず初めに様子を見るべく2台でクラスタを作りました。 > > scoutのテストにおいて、 > # scorehosts -l -g pcc > server.pcl.org > comp1.pcl.org > 2 hosts found. > > # sceptic -v -g pcc > server.pcl.org: OK > comp1.pcl.org: OK > All host responding. > > > # scout -g pcc > > [comp1.pcl.org]: Spawn timed out. > SCOUT: Session done. > > というエラーがでました。comp1.pcl.orgと言うのが計算ホストで、計算ホスト兼 > サーバがserver.pcl.orgです。scorehosts -l -g pcc やsceptic -v -g pccではエ > ラーはありませんでした。 その host の hostname が間違っていたときにそのような現象を経験しました. scout は自分の hostname を gethostbyname() により正式名に変換して scout されたホストに送ります. このため, compute host の hostname は少なくても /etc/hosts, NIS などに登録されていて, それが公式な名前 (この場合は comp1.pcl.org) と一致している必要があります. hostname が正しくないとそれがうまくいかなくて接続できなくなります. comp1.pcl.org の hostname を確認してみてください. from Kameyama Toyohisa From tanabe @ ifpj.com Wed Oct 13 17:11:39 2004 From: tanabe @ ifpj.com (田辺正孝) Date: Wed, 13 Oct 2004 17:11:39 +0900 Subject: [SCore-users-jp] fedora core1でのscore5.8.0インストール Message-ID: <004301c4b0fc$4aa1ee70$dc01a8c0@ifp1> お世話になっております。 fedora core1上にscore5.8.0をインストールしようとしていますが、 この場合も、linux-2.4.22-1.2115.nptにllinux2.4.21.score.patch を適用するのでしょうか?。 --------------------------------- 〒206-0033東京都多摩市落合5-9-7-3 (有)流体物理研究所 田辺正孝 tel:042-373-1264 fax:042-373-1262 携帯:090-1884-8485 tanabe @ ifpj.com http://www.ifpj.com --------------------------------- From kameyama @ pccluster.org Wed Oct 13 17:18:15 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Wed, 13 Oct 2004 17:18:15 +0900 Subject: [SCore-users-jp] fedora core1でのscore5.8.0 インストール In-Reply-To: Your message of "Wed, 13 Oct 2004 17:11:39 JST." <004301c4b0fc$4aa1ee70$dc01a8c0@ifp1> Message-ID: <20041013081301.2405512894D@neal.il.is.s.u-tokyo.ac.jp> 亀山です. In article <004301c4b0fc$4aa1ee70$dc01a8c0 @ ifp1> 田辺正孝 wrotes: > fedora core1上にscore5.8.0をインストールしようとしていますが、 > この場合も、linux-2.4.22-1.2115.nptにllinux2.4.21.score.patch > を適用するのでしょうか?。 kernel の patch はすべて original からのものになっています. linux 2.4.21 のオリジナルの kernel に llinux2.4.21.score.patch をあてたものを使用してください. from Kameyama Toyohisa From kei_hata @ hotmail.com Fri Oct 15 00:25:42 2004 From: kei_hata @ hotmail.com (hata kei) Date: Fri, 15 Oct 2004 00:25:42 +0900 Subject: [SCore-users-jp] Redhat9 and Intel fortran 7.1.044 Message-ID: 畑田です。 Redhat9にSCore5.8をソースからコンパイルしてインストールをしました。それに最 近配布されたintel fortran 7.1.044をインストールし、 (1) # cp /opt/score/etc/compilers/site.sample.intel /opt/score/etc/compilers/site (2) # cd /opt/score/score-src/runtime/mpi (3) # smake としたところ、 ......................... .................... .................. /opt/score/score-src/runtime/mpi/mpich-1.2.5/src/mpid/ch_score/chdef_rma.h:76: warning: no semicolon at end of struct or union /opt/score/score-src/runtime/mpi/mpich-1.2.5/src/mpid/ch_score/chdef_rma.h:77: warning: data definition has no type or storage class /opt/score/score-src/runtime/mpi/mpich-1.2.5/src/mpid/ch_score/chdef_rma.h:81: parse error before '}' token /opt/score/score-src/runtime/mpi/mpich-1.2.5/src/mpid/ch_score/chdef_rma.h:203: parse error before "pmAddrHandle" /opt/score/score-src/runtime/mpi/mpich-1.2.5/src/mpid/ch_score/chdef_rma.h:215: parse error before "pmAddrHandle" make[5]: *** [adi2recv.o] Error 1 Exit status from make was 2 make[4]: *** [mpilib] Error 1 make[3]: *** [mpi-modules] Error 2 make[2]: *** [mpi] Error 2 make[2]: Leaving directory `/opt/score/score-src/runtime/mpi/mpich-1.2.5/build.i386-redhat9-linux2_4_intel' make[1]: Leaving directory `/opt/score/score-src/runtime/mpi/mpich-1.2.5' という様なエラーがでました。引続きsmake installをおこなっても、そのあとmpi77 などでコンパイルしても、mpich-1.2.5 is not installedというエラーが出ます。 何かパッチなどをあてる必要があるのでしょうか? _________________________________________________________________ 楽しい絵文字でココロ伝わるメッセンジャー http://messenger.msn.co.jp/ From kei_hata @ hotmail.com Fri Oct 15 05:12:04 2004 From: kei_hata @ hotmail.com (hata kei) Date: Fri, 15 Oct 2004 05:12:04 +0900 Subject: [SCore-users-jp] Redhat9 and Intel fortran 7.1.044 Message-ID: 畑田です。 すいません訂正です。 /opt/score/etc/compilers/site.sample.intelをコピーして /opt/score/etc/compilers/siteとしたのですが、iccをインストールしていなかった のにその点を変更し忘れたためsmakeの後にエラーがでた様です。 それを訂正した後はそのエラーはでませんが、やはりmpich-1.2.5 is not installed はでます。icc7.1もインストールしてみましたが、mpiccとmpic++ではmpichのエラー はでませんでした。 _________________________________________________________________ 楽しい絵文字でココロ伝わるメッセンジャー http://messenger.msn.co.jp/ From kameyama @ pccluster.org Fri Oct 15 09:03:27 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Fri, 15 Oct 2004 09:03:27 +0900 Subject: [SCore-users-jp] Redhat9 and Intel fortran 7.1.044 In-Reply-To: Your message of "Fri, 15 Oct 2004 05:12:04 JST." Message-ID: <20041014235807.B45A112894E@neal.il.is.s.u-tokyo.ac.jp> 亀山です. In article "hata kei" wrotes: > すいません訂正です。 > /opt/score/etc/compilers/site.sample.intelをコピーして > /opt/score/etc/compilers/siteとしたのですが、iccをインストールしていなかった > のにその点を変更し忘れたためsmakeの後にエラーがでた様です。 > > それを訂正した後はそのエラーはでませんが、やはりmpich-1.2.5 is not installed > はでます。icc7.1もインストールしてみましたが、mpiccとmpic++ではmpichのエラー > はでませんでした。 mpich のconfigure で Fortran の認識か link に失敗している可能性が 高いと思います. configure 部分の出力 checking whether filesystem respects case in file names... yes checking for install checking for ranlib checking gnumake... yes using --no-print-directory checking whether make supports include... yes checking OSF V3 make... no checking for virtual path format... VPATH ... などと出力されている部分を見直してください. 特に checking for /opt/score/bin/scoref77... found /opt/score/bin/scoref77 (1) とか Configuring Fortran subsystem の下あたりが重要です. from Kameyama Toyohisa From kei_hata @ hotmail.com Fri Oct 15 14:37:31 2004 From: kei_hata @ hotmail.com (hata kei) Date: Fri, 15 Oct 2004 14:37:31 +0900 Subject: [SCore-users-jp] Redhat9 and Intel fortran 7.1.044 Message-ID: 畑田です。 > >mpich のconfigure で Fortran の認識か link に失敗している可能性が >高いと思います. >configure 部分の出力 > checking whether filesystem respects case in file names... yes > checking for install > checking for ranlib > checking gnumake... yes using --no-print-directory > checking whether make supports include... yes > checking OSF V3 make... no > checking for virtual path format... VPATH > ... >などと出力されている部分を見直してください. >特に > checking for /opt/score/bin/scoref77... found /opt/score/bin/scoref77 (1) >とか > Configuring Fortran subsystem >の下あたりが重要です. > それらのあたりにエラーは無いようでした。ただmake secondfの個所で、 ............................... make secondf /opt/score/score-src/runtime/mpi/mpich-1.2.0/build.i386-redhat9-linux2_4_intel/b in/mpif77 -c /opt/score/score-src/runtime/mpi/mpich-1.2.0/src/examples/test/pt 2pt/secondf.f ifc: Command line warning: ignoring unknown option '-N109' ifc: Command line warning: ignoring unknown option '-N109' program MAIN integer*8 MPI_DISPLACEMENT_CURRENT ^ Warning 2 at (233:/opt/score/score-src/runtime/mpi/mpich-1.2.0/build.i386-redhat 9-linux2_4_intel/include/mpif.h) : Type size specifiers are an extension to stan dard Fortran 95 count = 10 ^ Warning 4 at (41:/opt/score/score-src/runtime/mpi/mpich-1.2.0/src/examples/test/ pt2pt/secondf.f) : Tab characters are an extension to standard Fortran 95 309 Lines Compiled if test "1" = 1 ; then \ /opt/score/score-src/runtime/mpi/mpich-1.2.0/build.i386-redhat9-linux2_4_intel/b in/mpif77 -o ./secondf secondf.o ; fi ifc: Command line warning: ignoring unknown option '-N109' ifc: Command line warning: ignoring unknown option '-N109' ld: cannot open +U77: No such file or directory make[5]: *** [secondf] Error 1 make[5]: *** [secondf] Error 1 make[4]: [linktest] Error 2 (ignored) Could not link a Fortran program with MPI libraries make[4]: *** [linktest] Error 1 make[3]: *** [linktest] Error 2 make[2]: *** [mpi] Error 2 make[2]: Leaving directory `/opt/score/score-src/runtime/mpi/mpich-1.2.0/build.i 386-redhat9-linux2_4_intel' make[1]: Leaving directory `/opt/score/score-src/runtime/mpi/mpich-1.2.0' + old_pwd=/opt/score/score-src/runtime/mpi + cd mpich-1.2.4 ............................... とありました。 どのように対処すべきでしょうか。 _________________________________________________________________ 楽しい絵文字でココロ伝わるメッセンジャー http://messenger.msn.co.jp/ From kameyama @ pccluster.org Fri Oct 15 14:53:47 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Fri, 15 Oct 2004 14:53:47 +0900 Subject: [SCore-users-jp] Redhat9 and Intel fortran 7.1.044 In-Reply-To: Your message of "Fri, 15 Oct 2004 14:37:31 JST." Message-ID: <20041015054827.2EEE212894E@neal.il.is.s.u-tokyo.ac.jp> 亀山です. In article "hata kei" wrotes: > >mpich のconfigure で Fortran の認識か link に失敗している可能性が > >高いと思います. > >configure 部分の出力 > > checking whether filesystem respects case in file names... yes > > checking for install > > checking for ranlib > > checking gnumake... yes using --no-print-directory > > checking whether make supports include... yes > > checking OSF V3 make... no > > checking for virtual path format... VPATH > > ... > >などと出力されている部分を見直してください. > >特に > > checking for /opt/score/bin/scoref77... found /opt/score/bin/scoref77 > (1) > >とか > > Configuring Fortran subsystem > >の下あたりが重要です. > > > それらのあたりにエラーは無いようでした。ただmake secondfの個所で、 > > ............................... > make secondf > /opt/score/score-src/runtime/mpi/mpich-1.2.0/build.i386-redhat9-linux2_4_inte > l/b > > in/mpif77 -c あ, mpi の下には mpi の version が 3 つ格納されています. 1.2.5 の log は後ろのほうにありますので, 注意してください. これは mpich 1.2.0 の log なので, 1.2.0 を使用しなければ無視しても構いません. (1.2.5 でもこうなっているのでしたら問題ですど...) from Kameyama Toyohisa From shimura @ ifs.tohoku.ac.jp Mon Oct 18 10:07:56 2004 From: shimura @ ifs.tohoku.ac.jp (Tsutomu Shimura) Date: Mon, 18 Oct 2004 10:07:56 +0900 Subject: [SCore-users-jp] Score用ハードウェア Message-ID: <20041018095617.13B4.SHIMURA@ifs.tohoku.ac.jp> 東北大学流体科学研究所の志村と申します。 近々、研究室にScoreを導入する予定で マシンの選定を進めております。 ・Intel E7501 FSB 533MHz ・Dual XEON を予定していましたが、最近になって ・Intel E7320 FSB 800MHzやIntel E7525 FSB 800MHz ・Dual XEON も同価格帯で購入可能なのですが これらのハードウェアの動作実績はありますでしょうか? なお、Score5.8, Omni OpenMP にてクラスタ構築予定です。 よろしくお願いします。 ================================================= Tsutomu Shimura (shimura @ ifs.tohoku.ac.jp) Institute of Fluid Science, Tohoku University Sendai 980-8577, Japan Tel/Fax : +81-022-217-5282 ================================================= From kameyama @ pccluster.org Mon Oct 18 18:28:41 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Mon, 18 Oct 2004 18:28:41 +0900 Subject: [SCore-users-jp] Score用ハードウェア In-Reply-To: Your message of "Mon, 18 Oct 2004 10:07:56 JST." <20041018095617.13B4.SHIMURA@ifs.tohoku.ac.jp> Message-ID: <20041018092310.A1EBD12894C@neal.il.is.s.u-tokyo.ac.jp> 亀山です. In article <20041018095617.13B4.SHIMURA @ ifs.tohoku.ac.jp> Tsutomu Shimura wrotes: > 近々、研究室にScoreを導入する予定で > マシンの選定を進めております。 > > ・Intel E7501 FSB 533MHz > ・Dual XEON > > を予定していましたが、最近になって > > ・Intel E7320 FSB 800MHzやIntel E7525 FSB 800MHz > ・Dual XEON > > も同価格帯で購入可能なのですが > これらのハードウェアの動作実績はありますでしょうか? 残念ながら動かしたことはありませんが, kernel さえ動けば動くとは思います. from Kameyama Toyohisa From iida @ st-systems.co.jp Wed Oct 27 13:20:32 2004 From: iida @ st-systems.co.jp (Masayasu Iida) Date: Wed, 27 Oct 2004 13:20:32 +0900 Subject: [SCore-users-jp] rpmtestの結果の判断について Message-ID: <417F2210.1080609@st-systems.co.jp> いつもお世話になっております。 サイエンス・テクノロジー・システムの飯田です。 rpmtestの結果の判断についてご質問させてください。 SCore 5.8.0 + RedHat9の環境でNICは Intel Gigabit Ethernet Controller 82545EM を使っております。 rpmtestのping-pongテストは成功しているのですが、 返される値が2.585e-5という値になります。 これがいわゆるSCoreのPMデバイスのレイテンシと 判断すればよろしいのでしょうか。 もしそうであれば、この値はあまりパフォーマンスが 出ていないとご判断されますでしょうか。 ドライバはe1000-4.3.5、e1000-5.4.5、kernel-2.4.21標準の ものを試してみたのですが、e1000-4.3.5では更に一桁値が 大きくなり、5.4.5とkernel-2.4.21では上記程度の値が 返ってきます。 PMデバイスの性能はやはりハードウェアとLinuxのドライバに 大きく影響を受けるのでしょうか。 お手数をおかけしますがアドバイスを頂けますと幸いです。 ------------------------------------------------ 飯田 昌康 サイエンス・テクノロジー・システムズ株式会社 東日本営業部 営業技術グループ マネージャー Tel:03-5774-6833 Fax:03-5774-5180 E-mail: iida @ st-systems.co.jp Web: http://www.st-systems.co.jp 〒150-0002 東京都渋谷区渋谷1-20-1 三進ビル4F ------------------------------------------------ From iida @ st-systems.co.jp Wed Oct 27 13:24:44 2004 From: iida @ st-systems.co.jp (Masayasu Iida) Date: Wed, 27 Oct 2004 13:24:44 +0900 Subject: [SCore-users-jp] rpmtestの結果の判断について Message-ID: <417F230C.205@st-systems.co.jp> いつもお世話になっております。 サイエンス・テクノロジー・システムの飯田です。 rpmtestの結果の判断についてご質問させてください。 SCore 5.8.0 + RedHat9の環境でNICは Intel Gigabit Ethernet Controller 82545EM を使っております。 rpmtestのping-pongテストは成功しているのですが、 返される値が2.585e-5という値になります。 これがいわゆるSCoreのPMデバイスのレイテンシと 判断すればよろしいのでしょうか。 もしそうであれば、この値はあまりパフォーマンスが 出ていないとご判断されますでしょうか。 ドライバはe1000-4.3.5、e1000-5.4.5、kernel-2.4.21標準の ものを試してみたのですが、e1000-4.3.5では更に一桁値が 大きくなり、5.4.5とkernel-2.4.21では上記程度の値が 返ってきます。 PMデバイスの性能はやはりハードウェアとLinuxのドライバに 大きく影響を受けるのでしょうか。 お手数をおかけしますがアドバイスを頂けますと幸いです。 ------------------------------------------------ 飯田 昌康 サイエンス・テクノロジー・システムズ株式会社 東日本営業部 営業技術グループ マネージャー Tel:03-5774-6833 Fax:03-5774-5180 E-mail: iida @ st-systems.co.jp Web: http://www.st-systems.co.jp 〒150-0002 東京都渋谷区渋谷1-20-1 三進ビル4F ------------------------------------------------ From suga @ sse.co.jp Wed Oct 27 16:39:49 2004 From: suga @ sse.co.jp (Sugano, Mitsukuni) Date: Wed, 27 Oct 2004 16:39:49 +0900 Subject: [SCore-users-jp] ypserv Message-ID: <417F50C5.8C0E0BB9@sse.co.jp> 住商エレクトロニクスの菅野と申します。 いつもお世話になっております。 RedHatのypservは、予期せずダウンすることが有り、この対策として ypservを1日1回、restartする等が考えられますが、再起動直後にダ ウンしてしまう場合、ほぼ丸一日認証ができない状態に陥ることが考 えられます。SCoreでは、このあたりの対策を何か施されていますで しょうか? 以上、よろしくお願いいたします。 From kameyama @ pccluster.org Wed Oct 27 17:21:26 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Wed, 27 Oct 2004 17:21:26 +0900 Subject: [SCore-users-jp] ypserv In-Reply-To: Your message of "Wed, 27 Oct 2004 16:39:49 JST." <417F50C5.8C0E0BB9@sse.co.jp> Message-ID: <20041027082114.6B6F212895D@neal.il.is.s.u-tokyo.ac.jp> 亀山です. In article <417F50C5.8C0E0BB9 @ sse.co.jp> "Sugano, Mitsukuni" wrotes: > RedHatのypservは、予期せずダウンすることが有り、この対策として > ypservを1日1回、restartする等が考えられますが、再起動直後にダ > ウンしてしまう場合、ほぼ丸一日認証ができない状態に陥ることが考 > えられます。 私の環境ではほとんど落ちませんけど... (redhat 7.2 および redhat 7.3 で, ypserv-2.8-0.72E, ypserv-2.8-0.73E に update はしていますけど...) redhat の version はいくつで, upserv の version はいくつでしょうか? > SCoreでは、このあたりの対策を何か施されていますで > しょうか? SCore では特に対応していませんが, 一般的には以下の対策が考えられます. 1. update が無いか確認する. redhat 7.x でしたら http://www.jp.redhat.com/support/errata/RHSA/RHSA-2002-223J.html によると, オリジナルのものは memory leek があったようです. redhat 9 まではセキュリティホールもあるようなので. http://www.jp.redhat.com/support/errata/RHSA/RHSA-2003-173J.html に update するべきだと思います. 2. 別の ypserver が信頼できる host で ypserver を動かす. 3. 複数の slave server をたて, 他の host は broadcast により運用する. (複数の host で上がっていれば restart が必要なときでも 時間をずらして行うことができると思います.) from Kameyama Toyohisa From naoya @ smg.is.titech.ac.jp Thu Oct 28 01:07:46 2004 From: naoya @ smg.is.titech.ac.jp (Naoya Maruyama) Date: Wed, 27 Oct 2004 11:07:46 -0500 Subject: [SCore-users-jp] sc_watch Message-ID: <417FC7D2.7040108@matsulab.is.titech.ac.jp> sc_watchについて質問があります。 SCore5.4, RedHat7.1, kernel v2.4.19 の環境で、sc_watchを実行すると、サブ ミットしたノードのsyslogに例えば、 日付 ノード名 日付 時刻 sc_watch: ノード名 の形式のメッセージが全計算ノード分について記録されますが、ときどき一部の ノードについてこのメッセージが記録されていない場合があります(node00- node63で構成している場合に、node10-node20についてのみないなど)。特に sc_watchはエラーメッセージを出力していないのですが、問題ないのでしょうか? 補足しますと、これはsc_watchによる自動再起動が行われたときに発生しまし た。すなわち、 1. sc_watch がタイムアウトを検出 2. 各ノードでscremote, scoredを再起動 3. sc_watch を再実行 の、イベント3の段階で発生しました。ログがないノードのsyslogから、イベン ト2のscremoteは実行されていることは確認しています。 また、sc_watchがイベント1でタイムアウトを検出したノードがどのノードかは どこを調べたらわかりますでしょうか? ちなみに、このときはこちらの環境になんらかの問題があった模様で、自動再起 動が繰り返し発生していました。現在その原因を探っているのですが、なんらか の手がかりが得られると幸いです。よろしくお願いします。 丸山直也 東工大 From naoya @ smg.is.titech.ac.jp Thu Oct 28 03:14:55 2004 From: naoya @ smg.is.titech.ac.jp (Naoya Maruyama) Date: Wed, 27 Oct 2004 13:14:55 -0500 Subject: [SCore-users-jp] SCore5.6 Message-ID: <417FE59F.8090001@matsulab.is.titech.ac.jp> ウェブサイトによりますと、SCore5.4から5.6へバージョンアップしたときに、 いくつかのバグフィックスがされたそうですが、これらの詳細はどこを見ればわ かりますか?ChangeLogファイルなどをscore-5.6.0.score.tar.gzの中で探しま したが見つかりませんでした。 具体的には、 > SCore 5.6 で修正したバグ > > 1. IA64 の myrinet の RMA のバグを直しました。 > 2. PM/shmem の pmTruncateBuffer のバグを直しました。 > 3. scoreboard のキャッシュのバグを直しました。 > 4. scoutバグを直しました。 > 5. Checkpoint バグを直しました。 > 6. Output redirection バグを直しました。 の、2、3、4、5、6の詳細を調べたいと思っています。よろしくお願いします。 丸山直也 東工大 From juliexz @ rogers.com Thu Oct 28 08:57:50 2004 From: juliexz @ rogers.com (Julie) Date: Wed, 27 Oct 2004 18:57:50 -0500 Subject: [SCore-users-jp] (no subject) Message-ID: <200410272358.i9RNwaa11291@pccluster.org> Do you want a Rolex Watch? http://mwz.evif.com/r/giggles/watchs.html From benkt @ verizon.net Thu Oct 28 08:57:53 2004 From: benkt @ verizon.net (Ben) Date: Wed, 27 Oct 2004 18:57:53 -0500 Subject: [SCore-users-jp] [SCore-users] (no subject) Message-ID: <200410272358.i9RNwYa11290@pccluster.org> Want a cheap Rolex Watch? http://mfz.evif.com/r/giggles/watchs.html _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From kameyama @ pccluster.org Thu Oct 28 10:23:49 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Thu, 28 Oct 2004 10:23:49 +0900 Subject: [SCore-users-jp] rpmtestの結果の判断について In-Reply-To: Your message of "Wed, 27 Oct 2004 13:24:44 JST." <417F230C.205@st-systems.co.jp> Message-ID: <20041028012334.8763712894D@neal.il.is.s.u-tokyo.ac.jp> 亀山です. In article <417F230C.205 @ st-systems.co.jp> Masayasu Iida wrotes: > rpmtestの結果の判断についてご質問させてください。 > SCore 5.8.0 + RedHat9の環境でNICは > Intel Gigabit Ethernet Controller 82545EM > を使っております。 > > rpmtestのping-pongテストは成功しているのですが、 > 返される値が2.585e-5という値になります。 > これがいわゆるSCoreのPMデバイスのレイテンシと > 判断すればよろしいのでしょうか。 はい. これは ping-pong の応答にかかった時間です. 2.585e-5 ということは, 約 25.9 マイクロ秒ということになります. > もしそうであれば、この値はあまりパフォーマンスが > 出ていないとご判断されますでしょうか。 なぜ, そう判断したのかがわかりませんが... http://www.pccluster.org/score/dist/score/html/ja/overview/pm-perf.html と比較すると Gigabiit ethernet としては妥当なところではないでしょうか? > PMデバイスの性能はやはりハードウェアとLinuxのドライバに > 大きく影響を受けるのでしょうか。 PM/ethernet の場合は. NIC の種類, NIC のデバイスドライバ, pm-ethernet.conf のパラメータ, switch などが影響してきます. from Kameyama Toyohisa From kameyama @ pccluster.org Thu Oct 28 11:37:32 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Thu, 28 Oct 2004 11:37:32 +0900 Subject: [SCore-users-jp] SCore5.6 In-Reply-To: Your message of "Wed, 27 Oct 2004 13:14:55 JST." <417FE59F.8090001@matsulab.is.titech.ac.jp> Message-ID: <20041028023717.D55D812894D@neal.il.is.s.u-tokyo.ac.jp> 亀山です. In article <417FE59F.8090001 @ matsulab.is.titech.ac.jp> Naoya Maruyama wrotes: > ウェブサイトによりますと、SCore5.4から5.6へバージョンアップしたときに、 > いくつかのバグフィックスがされたそうですが、これらの詳細はどこを見ればわ > かりますか?ChangeLogファイルなどをscore-5.6.0.score.tar.gzの中で探しま > したが見つかりませんでした。 残念ながら, 詳しく文書化はされていません. 古いソースと diff をとるしかなさそうです. from Kameyama Toyohisa From vxcbcnp @ yahoo.com Sat Oct 9 22:36:10 2004 From: vxcbcnp @ yahoo.com (Nelson Dunn) Date: Sat, 9 Oct 2004 06:36:10 -0700 Subject: [SCore-users-jp] (no subject) Message-ID: <200410031493.i93CguTw004272@www4.warnerreprise.com> Hi again, Here is Nelson Dunn. I write to you because we are accepting your mortgage= application. Our office confirms you can get a $220.000 lo=C0n for a $252.00 per month = payment. Approval process will take 1 minute, so please fill out the form on our we= bsite: http://vacuole-macassar.refiinternet.com Thank you. Best Regards Nelson Dunn First Account Manager From vxcbcnp @ yahoo.com Sat Oct 9 22:36:10 2004 From: vxcbcnp @ yahoo.com (Nelson Dunn) Date: Sat, 9 Oct 2004 06:36:10 -0700 Subject: [SCore-users-jp] [SCore-users] (no subject) Message-ID: <200410031493.i93CguTw004272@www4.warnerreprise.com> Hi again, Here is Nelson Dunn. I write to you because we are accepting your mortgage= application. Our office confirms you can get a $220.000 lo=C0n for a $252.00 per month = payment. Approval process will take 1 minute, so please fill out the form on our we= bsite: http://vacuole-macassar.refiinternet.com Thank you. Best Regards Nelson Dunn First Account Manager _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From kameyama @ pccluster.org Thu Oct 28 14:22:11 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Thu, 28 Oct 2004 14:22:11 +0900 Subject: [SCore-users-jp] sc_watch In-Reply-To: Your message of "Wed, 27 Oct 2004 11:07:46 JST." <417FC7D2.7040108@matsulab.is.titech.ac.jp> Message-ID: <20041028052156.4680912894E@neal.il.is.s.u-tokyo.ac.jp> 亀山です. In article <417FC7D2.7040108 @ matsulab.is.titech.ac.jp> Naoya Maruyama wrotes: > SCore5.4, RedHat7.1, kernel v2.4.19 の環境で、sc_watchを実行すると、サブ > ミットしたノードのsyslogに例えば、 > > 日付 ノード名 日付 時刻 sc_watch: ノード名 > > の形式のメッセージが全計算ノード分について記録されますが、 この形式の message を見た記憶がないのですが... > 補足しますと、これはsc_watchによる自動再起動が行われたときに発生しまし > た。すなわち、 > > 1. sc_watch がタイムアウトを検出 > 2. 各ノードでscremote, scoredを再起動 > 3. sc_watch を再実行 sc_watch は再実行しませんけど... > また、sc_watchがイベント1でタイムアウトを検出したノードがどのノードかは > どこを調べたらわかりますでしょうか? sc_watch は scored が (その host で) 動いているかどうかを 監視しているだけなので, どのホストが原因であるかは関知しません. (SCore-D の bug で止っている可能性もありますし...) > ちなみに、このときはこちらの環境になんらかの問題があった模様で、自動再起 > 動が繰り返し発生していました。現在その原因を探っているのですが、なんらか > の手がかりが得られると幸いです。 SCore-D 自体に問題があるとしたら, sc_watch に指定する scored のかわりに scored_dev -scoredtrace 100 などを指定するともう少し詳しい情報がとれるかもしれません. (100 は debug レベルで小さいほどメッセージが出力されます.) from Kameyama Toyohisa From naoya @ smg.is.titech.ac.jp Thu Oct 28 15:34:47 2004 From: naoya @ smg.is.titech.ac.jp (Naoya Maruyama) Date: Thu, 28 Oct 2004 01:34:47 -0500 Subject: [SCore-users-jp] sc_watch In-Reply-To: <20041028052156.4680912894E@neal.il.is.s.u-tokyo.ac.jp> References: <20041028052156.4680912894E@neal.il.is.s.u-tokyo.ac.jp> Message-ID: <41809307.5080100@matsulab.is.titech.ac.jp> kameyama @ pccluster.org wrote: > 亀山です. > > In article <417FC7D2.7040108 @ matsulab.is.titech.ac.jp> Naoya Maruyama wrotes: > >>SCore5.4, RedHat7.1, kernel v2.4.19 の環境で、sc_watchを実行すると、サブ >>ミットしたノードのsyslogに例えば、 >> >>日付 ノード名 日付 時刻 sc_watch: ノード名 >> >>の形式のメッセージが全計算ノード分について記録されますが、 > > > この形式の message を見た記憶がないのですが... メッセージについて補足しますと、最初の日付、ノード名はsyslogでデフォルト でつくヘッダーであり、SCore側で「日付 時刻 sc_watch: 計算ノード名」とい う形式のメッセージが出されています。ちなみに、最初の一行だけは、「日付  時刻 sc_watch: SCOUNT Spawning 先頭計算ノード名」となっています。それ以 外は、他のすべての計算ノードについて上記形式のメッセージが記録されていま す。その中で、一部の計算ノードについてメッセージが抜けている場合があります。 > > >>補足しますと、これはsc_watchによる自動再起動が行われたときに発生しまし >>た。すなわち、 >> >>1. sc_watch がタイムアウトを検出 >>2. 各ノードでscremote, scoredを再起動 >>3. sc_watch を再実行 > > > sc_watch は再実行しませんけど... sc_watchのタイマーが再実行というのが正しいですね。 > > >>また、sc_watchがイベント1でタイムアウトを検出したノードがどのノードかは >>どこを調べたらわかりますでしょうか? > > > sc_watch は scored が (その host で) 動いているかどうかを > 監視しているだけなので, どのホストが原因であるかは関知しません. > (SCore-D の bug で止っている可能性もありますし...) いまいち "scored" と "SCore-D" の違いがよくわかっていないのですが、いく つか確認させてください。sc_watchでは、「あるノードAでscoredが動いてい る」≡「sc_watchにノードAから応答がある」であり、「あるノードAでscoredが 動いていない」≡「sc_watchにノードAから応答がない」ですよね? 私が質問しましたのはタイムアウトがどのホストとの間で起きたかを調べる手段 です。上の私の理解が正しければ、この情報は当然sc_watchは持っているはずだ と思うのですが。 > > SCore-D 自体に問題があるとしたら, > sc_watch に指定する scored のかわりに > scored_dev -scoredtrace 100 > などを指定するともう少し詳しい情報がとれるかもしれません. > (100 は debug レベルで小さいほどメッセージが出力されます.) > 情報ありがとうございます。こういった情報が他にもどこかに文書化されていた ら教えていただけると助かります。 丸山直也 東工大 From hori @ swimmy-soft.com Thu Oct 28 15:55:28 2004 From: hori @ swimmy-soft.com (Atsushi HORI) Date: Thu, 28 Oct 2004 15:55:28 +0900 Subject: [SCore-users-jp] sc_watch In-Reply-To: <41809307.5080100@matsulab.is.titech.ac.jp> References: <20041028052156.4680912894E@neal.il.is.s.u-tokyo.ac.jp> <41809307.5080100@matsulab.is.titech.ac.jp> Message-ID: <5A0610BE-28AE-11D9-878E-000D9335A128@swimmy-soft.com> 堀@スイミー・ソフトウェアです。 On 2004/10/28, at 15:34, Naoya Maruyama wrote: > いまいち "scored" と "SCore-D" の違いがよくわかっていないのですが、いく > つか確認させてください。sc_watchでは、「あるノードAでscoredが動いてい > る」≡「sc_watchにノードAから応答がある」であり、「あるノードAでscoredが > 動いていない」≡「sc_watchにノードAから応答がない」ですよね? sc_watch は全てのホスト(ノード)の状態を監視しているのではありません。もしこうすると 1,000 台のホストからなるクラスタでは 1,000 本もの監視ポート(具体的に、例えば TCP/IP)が必要になってしまいますから。 sc_watch は SCore-D、これはプログラムの名称で scored とはその実体のファイル名です、が定期的に各ホストからの返答を待ち、この結果をひとつにまとめて sc_watch に返しているのです。scored では PM が使えるので TCP/IP よりも高速に調べることができますし、TCP は正常だけど PM の通信がおかしいという状態も(完全ではないにせよ)調べることができます。 ですから、sc_watch にはその監視対象となる全ての scored プロセスが全て正常な状態か、そのどれかがおかしい状態か、しか分かりません。 > 私が質問しましたのはタイムアウトがどのホストとの間で起きたかを調べる手段 > です。上の私の理解が正しければ、この情報は当然sc_watchは持っているはずだ > と思うのですが。 scored がおかしくなった、というのは、ホストのダウンだけでなく、scored が使っている PM 通信が異常になった、あるいは scored 自体に異常(例えば PANIC)が生じた、という状況も含まれます。これらはいづれも結果的にユーザプログラムが正常に実行を継続できない状態なので、sc_watch としては再起動を試みるしかない訳です。 で、 > その中で、一部の計算ノードについてメッセージが抜けている場合があります。 がそもそもの問題だと理解しているのですが、どのように「抜け」ているのでしょう?できればログをそのまま(いっさい加工しないで)送って頂きたいです。 From naoya @ smg.is.titech.ac.jp Thu Oct 28 16:14:28 2004 From: naoya @ smg.is.titech.ac.jp (Naoya Maruyama) Date: Thu, 28 Oct 2004 02:14:28 -0500 Subject: [SCore-users-jp] sc_watch In-Reply-To: <5A0610BE-28AE-11D9-878E-000D9335A128@swimmy-soft.com> References: <20041028052156.4680912894E@neal.il.is.s.u-tokyo.ac.jp> <41809307.5080100@matsulab.is.titech.ac.jp> <5A0610BE-28AE-11D9-878E-000D9335A128@swimmy-soft.com> Message-ID: <41809C54.6020107@matsulab.is.titech.ac.jp> Atsushi HORI wrote: > > 堀@スイミー・ソフトウェアです。 > > > On 2004/10/28, at 15:34, Naoya Maruyama wrote: > >> いまいち "scored" と "SCore-D" の違いがよくわかっていないのですが、いく >> つか確認させてください。sc_watchでは、「あるノードAでscoredが動いてい >> る」≡「sc_watchにノードAから応答がある」であり、「あるノードAでscoredが >> 動いていない」≡「sc_watchにノードAから応答がない」ですよね? > > > sc_watch は全てのホスト(ノード)の状態を監視しているのではありません。 > もしこうすると 1,000 台のホストからなるクラスタでは 1,000 本もの監視ポー > ト(具体的に、例えば TCP/IP)が必要になってしまいますから。 > sc_watch は SCore-D、これはプログラムの名称で scored とはその実体のファ > イル名です、が定期的に各ホストからの返答を待ち、この結果をひとつにまとめ > て sc_watch に返しているのです。scored では PM が使えるので TCP/IP より > も高速に調べることができますし、TCP は正常だけど PM の通信がおかしいとい > う状態も(完全ではないにせよ)調べることができます。 > > ですから、sc_watch にはその監視対象となる全ての scored プロセスが全て正 > 常な状態か、そのどれかがおかしい状態か、しか分かりません。 どのノードから応答がないのかはscoredプロセスしか知らないのですね。了解し ました。 > >> 私が質問しましたのはタイムアウトがどのホストとの間で起きたかを調べる手段 >> です。上の私の理解が正しければ、この情報は当然sc_watchは持っているはずだ >> と思うのですが。 > > > scored がおかしくなった、というのは、ホストのダウンだけでなく、scored が > 使っている PM 通信が異常になった、あるいは scored 自体に異常(例えば > PANIC)が生じた、という状況も含まれます。これらはいづれも結果的にユーザ > プログラムが正常に実行を継続できない状態なので、sc_watch としては再起動 > を試みるしかない訳です。 > > で、 > >> その中で、一部の計算ノードについてメッセージが抜けている場合があります。 > > > がそもそもの問題だと理解しているのですが、どのように「抜け」ているので > しょう?できればログをそのまま(いっさい加工しないで)送って頂きたいです。 > こちらは少々お待ちください。管理者と相談してみます。 丸山直也 東工大 From kameyama @ pccluster.org Thu Oct 28 16:17:03 2004 From: kameyama @ pccluster.org (=?iso-2022-jp?b?a2FtZXlhbWEgGyRCIXcbKEIgcGNjbHVzdGVyLm9yZw==?=) Date: Thu, 28 Oct 2004 16:17:03 +0900 Subject: [SCore-users-jp] sc_watch In-Reply-To: Your message of "Thu, 28 Oct 2004 01:34:47 JST." <41809307.5080100@matsulab.is.titech.ac.jp> Message-ID: <20041028071647.B1784128954@neal.il.is.s.u-tokyo.ac.jp> 亀山です. In article <41809307.5080100 @ matsulab.is.titech.ac.jp> Naoya Maruyama wrotes: > > この形式の message を見た記憶がないのですが... > > メッセージについて補足しますと、最初の日付、ノード名はsyslogでデフォルト > でつくヘッダーであり、SCore側で「日付 時刻 sc_watch: 計算ノード名」とい > う形式のメッセージが出されています。ちなみに、最初の一行だけは、「日付  > 時刻 sc_watch: SCOUNT Spawning 先頭計算ノード名」となっています。それ以 > 外は、他のすべての計算ノードについて上記形式のメッセージが記録されていま > す。その中で、一部の計算ノードについてメッセージが抜けている場合があります。 あ, scout のときにでてくる message ですね. 会話的に使用するとき, どこまで scremote が起動したかを 示すために scout が出力するものです. 実際は hostname \b(hostname の長さだけ) space(hostname の長さだけ) というのがホスト名だけ出てきます. (その間改行なし.) これが全部記録されるかどうかは, 長い行を syslog が記録できるかに 関係しそうです. 多分, 気にしなくて良いのではないかと... > >>また、sc_watchがイベント1でタイムアウトを検出したノードがどのノードかは > >>どこを調べたらわかりますでしょうか? > > > > > > sc_watch は scored が (その host で) 動いているかどうかを > > 監視しているだけなので, どのホストが原因であるかは関知しません. > > (SCore-D の bug で止っている可能性もありますし...) > > いまいち "scored" と "SCore-D" の違いがよくわかっていないのですが 確かに... 同じものを示していました. > sc_watchでは、「あるノードAでscoredが動いてい > る」≡「sc_watchにノードAから応答がある」であり、「あるノードAでscoredが > 動いていない」≡「sc_watchにノードAから応答がない」ですよね? sc_watch は一つの host (syslog で server と出力される host) の scored しか 監視していません. scored はすべてのホストと通信し, (実際にはバケツリレー的に通信し, 自分に戻ってきたら) sc_watch にメッセージをなげます. sc_watch はこの scored から定期的に出力されるメッセージから scored が生きていると判断しています. (ソースで言うと, sc_watch 側が score-src/SCore/scored/adm/watch/sc_watch.c の watching() scored 側が core-src/SCore/scored/scored/patrol.cc の patrol_nodes() です.) > 私が質問しましたのはタイムアウトがどのホストとの間で起きたかを調べる手段 > です。上の私の理解が正しければ、この情報は当然sc_watchは持っているはずだ > と思うのですが。 というわけで, 誰も持っていません. > > SCore-D 自体に問題があるとしたら, > > sc_watch に指定する scored のかわりに > > scored_dev -scoredtrace 100 > > などを指定するともう少し詳しい情報がとれるかもしれません. > > (100 は debug レベルで小さいほどメッセージが出力されます.) > > > > 情報ありがとうございます。こういった情報が他にもどこかに文書化されていた > ら教えていただけると助かります。 これは debug 用のものなので... from Kameyama Toyohisa From hori @ swimmy-soft.com Thu Oct 28 16:49:59 2004 From: hori @ swimmy-soft.com (Atsushi HORI) Date: Thu, 28 Oct 2004 16:49:59 +0900 Subject: [SCore-users-jp] sc_watch In-Reply-To: <41809C54.6020107@matsulab.is.titech.ac.jp> References: <20041028052156.4680912894E@neal.il.is.s.u-tokyo.ac.jp> <41809307.5080100@matsulab.is.titech.ac.jp> <5A0610BE-28AE-11D9-878E-000D9335A128@swimmy-soft.com> <41809C54.6020107@matsulab.is.titech.ac.jp> Message-ID: 堀@スイミー・ソフトウェアです。 On 2004/10/28, at 16:14, Naoya Maruyama wrote: > どのノードから応答がないのかはscoredプロセスしか知らないのですね。了解し これは完全な蛇足ですが、scored *も* どのホストが死んだか分かっていません。これは単に分かろうとするアルゴリズムになっていない、というだけでなく、PM 通信がおかしくなった場合を考えると、通信がおかしいのかホストがおかしいのかを区別するのは簡単ではないからです。 まあ、ネットワークがハードウェア的におかしくなった時に、scored を再起動してもあまり意味はないのですが、ソフトウェアにできることと言えばそれくらいしかないもので… From naoya @ smg.is.titech.ac.jp Thu Oct 28 17:02:54 2004 From: naoya @ smg.is.titech.ac.jp (Naoya Maruyama) Date: Thu, 28 Oct 2004 03:02:54 -0500 Subject: [SCore-users-jp] sc_watch In-Reply-To: <20041028071647.B1784128954@neal.il.is.s.u-tokyo.ac.jp> References: <20041028071647.B1784128954@neal.il.is.s.u-tokyo.ac.jp> Message-ID: <4180A7AE.5050406@matsulab.is.titech.ac.jp> kameyama @ pccluster.org wrote: > 亀山です. > > In article <41809307.5080100 @ matsulab.is.titech.ac.jp> Naoya Maruyama wrotes: > >>>この形式の message を見た記憶がないのですが... >> >>メッセージについて補足しますと、最初の日付、ノード名はsyslogでデフォルト >>でつくヘッダーであり、SCore側で「日付 時刻 sc_watch: 計算ノード名」とい >>う形式のメッセージが出されています。ちなみに、最初の一行だけは、「日付  >>時刻 sc_watch: SCOUNT Spawning 先頭計算ノード名」となっています。それ以 >>外は、他のすべての計算ノードについて上記形式のメッセージが記録されていま >>す。その中で、一部の計算ノードについてメッセージが抜けている場合があります。 > > > あ, scout のときにでてくる message ですね. > 会話的に使用するとき, どこまで scremote が起動したかを > 示すために scout が出力するものです. > 実際は > hostname > \b(hostname の長さだけ) > space(hostname の長さだけ) > というのがホスト名だけ出てきます. > (その間改行なし.) > これが全部記録されるかどうかは, 長い行を syslog が記録できるかに > 関係しそうです. > > 多分, 気にしなくて良いのではないかと... 不思議なのが、すべて記録される場合もあればそうでない場合もあるということ です。また、長い行が記録できないというならば、行の末尾が省かれるのではな いかと思いますが、だとしたらscoutがscremoteを起動した順番の最後の方の計 算ノードについて省かれることになるはずですよね。scoutがノード番号の先頭 ノードから順にscremoteを実行するのであれば(正常にすべて記録されている場 合はノード番号順になっています)、計算ノード郡の途中のノードについてメッ セージが省かれてしまうというのはおかしいと思います。 > > >>>>また、sc_watchがイベント1でタイムアウトを検出したノードがどのノードかは >>>>どこを調べたらわかりますでしょうか? >>> >>> >>>sc_watch は scored が (その host で) 動いているかどうかを >>>監視しているだけなので, どのホストが原因であるかは関知しません. >>>(SCore-D の bug で止っている可能性もありますし...) >> >>いまいち "scored" と "SCore-D" の違いがよくわかっていないのですが > > > 確かに... > 同じものを示していました. > > >>sc_watchでは、「あるノードAでscoredが動いてい >>る」≡「sc_watchにノードAから応答がある」であり、「あるノードAでscoredが >>動いていない」≡「sc_watchにノードAから応答がない」ですよね? > > > sc_watch は一つの host (syslog で server と出力される host) の scored しか > 監視していません. > > scored はすべてのホストと通信し, (実際にはバケツリレー的に通信し, > 自分に戻ってきたら) sc_watch にメッセージをなげます. > > sc_watch はこの scored から定期的に出力されるメッセージから > scored が生きていると判断しています. > > (ソースで言うと, sc_watch 側が > score-src/SCore/scored/adm/watch/sc_watch.c の watching() > scored 側が > core-src/SCore/scored/scored/patrol.cc の patrol_nodes() > です.) > 解説どうもありがとうございます。納得いきました。 丸山直也 東工大 From jsljrnxup @ jjycf.net Thu Oct 28 17:41:47 2004 From: jsljrnxup @ jjycf.net (Diane Flinders) Date: Thu, 28 Oct 2004 03:41:47 -0500 Subject: [SCore-users-jp] [SCore-users] Diane Wall-street UACP Insider damascus Message-ID: <200410280944.i9S9iga14690@pccluster.org> Thu, 28 Oct 2004 03:46:14 -0500 Breaking News: uAuthorize Corp. Announces Marketing Agreement for Internet Telephony Handset. ********************Alert..UACP************************* BEFORE WE CONTINUE - VERY IMPORTANT - it is Expected that UACP will have VERY large PR campaign in the next 10 days and some very positive news and results are expected. ************************************************************ Watch out for it. Jump on board while this stock is below a dollar. Ticker:UACP current-price:0.34 10-days-target-price:1.25 3-Months-target-price:1.66 Breaking News for UACP: uAuthorize Corp. Announces Marketing Agreement for Internet Telephony Handset ?UACP? currently trading at 0.34 and is headed to 1.25 rapidly. The company released Ground Breaking news about its VOIP division! Although some would argue that VoIP is still maturing, corporate users are extremely interested in implementing the technology, creating exponential growth. Within the last four years, VoIP minutes increased from less than 0.5 to 2 percent of outbound international calls, according to research from TeleGeography. Additionally, predictions as to the size of the market itself vary, with Allied Business Intelligence projecting the VoIP market to grow from 3.7 billion in 2000 to 12.3 billion in 2006 and Synergy Research projecting the VoIP equipment market to grow to 13.3 billion by 2005. Profile:uAuthorize Corp Ticker:UACP Current-Price:0.34 Rating:Undervalued We Believe this is our best pick since March 2004!! **This is REAL company with real products and revenue its stock is headed up quickly especially the next 10 days from with major promotions underway and great news being released. So if you're looking for a winner look no further. Don't miss Big Gains starting Thursday Morning! Get it now before it explodes over the weekend with a massive fax campaign beginning on Friday and also featured in over 18 Major newletters over the weekend as well. mescaline mac Inf. ormation within this ema. il contains fo, rwar. d loo. king st, atement. s within t. he mea. ning of S. ecti. on 2. 7. A of the Secu. rit, ies A. ct 19. 33 and Sec, ti. on 21. B of th. e Secu. rit. ies Ex, chan. ge A. ct 1.9 34. Any sta. teme. nts th, at expr, ess or invol, ve discus, sions with re, spect t. o pr. edicti. on ass. umpt. ions or future eve. nts or pe, rform, anc,e are not s. tatem. ents of histo. ric, al fac, t and may b, e fo, rwa, rd looking sta. temen. ts. Th. is letter was p, aid 112 500 fr, om thi, rd pa, rty to se, nd this rep, ort. Ple, ase Yo, u m, ay los. e mo. ney fro. m inve. sting i.n Pen. ny St, o, cks. active transmitter snag spree fizz beeswax raleigh swallow _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From ahodsnf @ doylebronzes.co.za Thu Oct 28 17:51:42 2004 From: ahodsnf @ doylebronzes.co.za (Norene Northup) Date: Thu, 28 Oct 2004 03:51:42 -0500 Subject: [SCore-users-jp] Norene UptickSt0cks UACP mexico Message-ID: <200410280946.i9S9kGa14730@pccluster.org> Thu, 28 Oct 2004 03:45:13 -0500 Breaking News: uAuthorize Corp. Announces Marketing Agreement for Internet Telephony Handset. ********************Alert..UACP************************* BEFORE WE CONTINUE - VERY IMPORTANT - it is Expected that UACP will have VERY large PR campaign in the next 10 days and some very positive news and results are expected. ************************************************************ Watch out for it. Jump on board while this stock is below a dollar. Ticker:UACP current-price:0.34 10-days-target-price:1.25 3-Months-target-price:1.66 Breaking News for UACP: uAuthorize Corp. Announces Marketing Agreement for Internet Telephony Handset ?UACP? currently trading at 0.34 and is headed to 1.25 rapidly. The company released Ground Breaking news about its VOIP division! Although some would argue that VoIP is still maturing, corporate users are extremely interested in implementing the technology, creating exponential growth. Within the last four years, VoIP minutes increased from less than 0.5 to 2 percent of outbound international calls, according to research from TeleGeography. Additionally, predictions as to the size of the market itself vary, with Allied Business Intelligence projecting the VoIP market to grow from 3.7 billion in 2000 to 12.3 billion in 2006 and Synergy Research projecting the VoIP equipment market to grow to 13.3 billion by 2005. Profile:uAuthorize Corp Ticker:UACP Current-Price:0.34 Rating:Undervalued We Believe this is our best pick since March 2004!! **This is REAL company with real products and revenue its stock is headed up quickly especially the next 10 days from with major promotions underway and great news being released. So if you're looking for a winner look no further. Don't miss Big Gains starting Thursday Morning! Get it now before it explodes over the weekend with a massive fax campaign beginning on Friday and also featured in over 18 Major newletters over the weekend as well. piling debrief Inf. ormation within this ema. il contains fo, rwar. d loo. king st, atement. s within t. he mea. ning of S. ecti. on 2. 7. A of the Secu. rit, ies A. ct 19. 33 and Sec, ti. on 21. B of th. e Secu. rit. ies Ex, chan. ge A. ct 1.9 34. Any sta. teme. nts th, at expr, ess or invol, ve discus, sions with re, spect t. o pr. edicti. on ass. umpt. ions or future eve. nts or pe, rform, anc,e are not s. tatem. ents of histo. ric, al fac, t and may b, e fo, rwa, rd looking sta. temen. ts. Th. is letter was p, aid 112 500 fr, om thi, rd pa, rty to se, nd this rep, ort. Ple, ase Yo, u m, ay los. e mo. ney fro. m inve. sting i.n Pen. ny St, o, cks. neither voluntarism topgallant ingratitude syracuse enfold porch pamphlet From suga @ sse.co.jp Thu Oct 28 20:16:00 2004 From: suga @ sse.co.jp (Sugano, Mitsukuni) Date: Thu, 28 Oct 2004 20:16:00 +0900 Subject: [SCore-users-jp] ypserv References: <20041027082114.6B6F212895D@neal.il.is.s.u-tokyo.ac.jp> Message-ID: <4180D4F0.4BB6D823@sse.co.jp> 亀山様: 菅野です。 お忙しい中、ご回答ありがとうございました。 今後とも、よろしくお願い申し上げます。 kameyama @ pccluster.org wrote: > > 亀山です. > > In article <417F50C5.8C0E0BB9 @ sse.co.jp> "Sugano, Mitsukuni" wrotes: > > RedHatのypservは、予期せずダウンすることが有り、この対策として > > ypservを1日1回、restartする等が考えられますが、再起動直後にダ > > ウンしてしまう場合、ほぼ丸一日認証ができない状態に陥ることが考 > > えられます。 > > 私の環境ではほとんど落ちませんけど... > (redhat 7.2 および redhat 7.3 で, ypserv-2.8-0.72E, ypserv-2.8-0.73E に > update はしていますけど...) > redhat の version はいくつで, upserv の version はいくつでしょうか? > > > SCoreでは、このあたりの対策を何か施されていますで > > しょうか? > > SCore では特に対応していませんが, 一般的には以下の対策が考えられます. > > 1. update が無いか確認する. > redhat 7.x でしたら > http://www.jp.redhat.com/support/errata/RHSA/RHSA-2002-223J.html > によると, オリジナルのものは memory leek があったようです. > redhat 9 まではセキュリティホールもあるようなので. > http://www.jp.redhat.com/support/errata/RHSA/RHSA-2003-173J.html > に update するべきだと思います. > > 2. 別の ypserver が信頼できる host で ypserver を動かす. > > 3. 複数の slave server をたて, 他の host は broadcast により運用する. > (複数の host で上がっていれば restart が必要なときでも > 時間をずらして行うことができると思います.) > > from Kameyama Toyohisa > _______________________________________________ > SCore-users-jp mailing list > SCore-users-jp @ pccluster.org > http://www.pccluster.org/mailman/listinfo/score-users-jp From josh @ sepreview.com Fri Oct 29 06:04:44 2004 From: josh @ sepreview.com (Josh Connors) Date: Thu, 28 Oct 2004 17:04:44 -0400 Subject: [SCore-users-jp] your website Message-ID: <200410282102.i9SL2Ya18196@pccluster.org> We help new websites get hosted and established sites perform better. If you?re looking to improve your online presence, let us know what you?re trying to do, your URL, and how to contact you. We'll review your site and let you know how we can help. If this message has nothing to do with you, send us a blank message with N/A for a subject to avoid any future offers. Thank you for your time, Listing Solutions Herndon, VA From njknlbokjzq @ yahoo.com Sat Oct 9 22:36:10 2004 From: njknlbokjzq @ yahoo.com (Ernest Briggs) Date: Sat, 9 Oct 2004 06:36:10 -0700 Subject: [SCore-users-jp] (no subject) Message-ID: <200410031447.i93MraTw001808@www2.gmail.com> Hi again, Here is Ernest Briggs. I write to you because we are accepting your mortga= ge application. Our office confirms you can get a $220.000 lo=C0n for a $252.00 per month = payment. Approval process will take 1 minute, so please fill out the form on our we= bsite: http://prejudicial-buckthorn.refitalk.com Thank you. Best Regards Ernest Briggs First Account Manager From njknlbokjzq @ yahoo.com Sat Oct 9 22:36:10 2004 From: njknlbokjzq @ yahoo.com (Ernest Briggs) Date: Sat, 9 Oct 2004 06:36:10 -0700 Subject: [SCore-users-jp] [SCore-users] (no subject) Message-ID: <200410031447.i93MraTw001808@www2.gmail.com> Hi again, Here is Ernest Briggs. I write to you because we are accepting your mortga= ge application. Our office confirms you can get a $220.000 lo=C0n for a $252.00 per month = payment. Approval process will take 1 minute, so please fill out the form on our we= bsite: http://prejudicial-buckthorn.refitalk.com Thank you. Best Regards Ernest Briggs First Account Manager _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From ztcptvi @ pisem.net Fri Oct 29 19:10:37 2004 From: ztcptvi @ pisem.net (Agnus Croke) Date: Fri, 29 Oct 2004 04:10:37 -0600 Subject: [SCore-users-jp] Save hundreds, get unexpenisive OEM CDs Message-ID: <20041029041037.6UuzRV5LVLZM@pisem.net> We have every software package you need: from Photoshop 7.0 to Visual Studio .NET http://bwnhxhtacg.cjccjcbb.info/?rGt0ZysUUvykJXrb9BSG From zeomie @ pisem.net Fri Oct 29 18:31:03 2004 From: zeomie @ pisem.net (Alice Croke) Date: 29 Oct 2004 03:31:03 -0600 Subject: [SCore-users-jp] [SCore-users] Save thousands: orrder unexpenisive OEM soft Message-ID: <20041029033103.iNwYsVOdyRfo@pisem.net> We have every software you need: from Office XP to Linux Redhat 7.3 http://rkofdqjtnnu.cjccjcbb.info/?rGt0ZysUUvykJXrzYYRh _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From qilsid @ yahoo.com Fri Oct 15 04:23:38 2004 From: qilsid @ yahoo.com (Elinor Burgess) Date: Thu, 14 Oct 2004 15:23:38 -0400 (EDT) Subject: [SCore-users-jp] (no subject) Message-ID: Hi again, Here is Elinor Burgess. I write to you because we are accepting your mortg= age application. Our office confirms you can get a $220.000 lo=C0n for a $252.00 per month = payment. Approval process will take 1 minute, so please fill out the form on our we= bsite: http://splotch-pup.webrefi.net Thank you. Best Regards Elinor Burgess First Account Manager From qilsid @ yahoo.com Fri Oct 15 04:23:38 2004 From: qilsid @ yahoo.com (Elinor Burgess) Date: Thu, 14 Oct 2004 15:23:38 -0400 (EDT) Subject: [SCore-users-jp] [SCore-users] (no subject) Message-ID: Hi again, Here is Elinor Burgess. I write to you because we are accepting your mortg= age application. Our office confirms you can get a $220.000 lo=C0n for a $252.00 per month = payment. Approval process will take 1 minute, so please fill out the form on our we= bsite: http://splotch-pup.webrefi.net Thank you. Best Regards Elinor Burgess First Account Manager _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From kkksovudn @ yahoo.com Fri Oct 15 04:23:38 2004 From: kkksovudn @ yahoo.com (Linda Thayer) Date: Thu, 14 Oct 2004 15:23:38 -0400 (EDT) Subject: [SCore-users-jp] (no subject) Message-ID: Hi again, Here is Linda Thayer. I write to you because we are accepting your mortgag= e application. Our office confirms you can get a $220.000 lo=C0n for a $252.00 per month = payment. Approval process will take 1 minute, so please fill out the form on our we= bsite: http://downtown-nc.webrefi.net Thank you. Best Regards Linda Thayer First Account Manager From kkksovudn @ yahoo.com Fri Oct 15 04:23:38 2004 From: kkksovudn @ yahoo.com (Linda Thayer) Date: Thu, 14 Oct 2004 15:23:38 -0400 (EDT) Subject: [SCore-users-jp] [SCore-users] (no subject) Message-ID: Hi again, Here is Linda Thayer. I write to you because we are accepting your mortgag= e application. Our office confirms you can get a $220.000 lo=C0n for a $252.00 per month = payment. Approval process will take 1 minute, so please fill out the form on our we= bsite: http://downtown-nc.webrefi.net Thank you. Best Regards Linda Thayer First Account Manager _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From Brysonbdzuu @ hotmail.com Sun Oct 31 10:17:39 2004 From: Brysonbdzuu @ hotmail.com (Romeo Ingram) Date: Sun, 31 Oct 2004 03:17:39 +0200 Subject: [SCore-users-jp] Fw: your boyfriend hurting Message-ID: VIC0D1N
Pain Relief !
More info




enough



morocco castatrocity cain butterfieldgalt dr gunail abbe angrygibraltar simplicity oscarscallop ingather deafheterocyclic merriam trolleyeugenia angelina alibiknown helmet impassiondoctrinaire From jxejbinbextfmg @ yahoo.com Sat Oct 9 22:36:10 2004 From: jxejbinbextfmg @ yahoo.com (Victor Andrews) Date: Sat, 9 Oct 2004 06:36:10 -0700 Subject: [SCore-users-jp] (no subject) Message-ID: <200410031470.i93VffTw003928@www7.gmail.com> Hi again, Here is Victor Andrews. I write to you because we are accepting your mortg= age application. Our office confirms you can get a $220.000 lo=C0n for a $252.00 per month = payment. Approval process will take 1 minute, so please fill out the form on our we= bsite: http://nancy-gainful.debt-states.com Thank you. Best Regards Victor Andrews First Account Manager Remove Me Please http://fraternity.debt-states.com/r1/ From wlsysquyvezq @ yahoo.com Sat Oct 9 22:36:10 2004 From: wlsysquyvezq @ yahoo.com (Thad Coffman) Date: Sat, 9 Oct 2004 06:36:10 -0700 Subject: [SCore-users-jp] [SCore-users] (no subject) Message-ID: <200410031490.i93KkgTw009172@www2.gmail.com> Hi again, Here is Thad Coffman. I write to you because we are accepting your mortgag= e application. Our office confirms you can get a $220.000 lo=C0n for a $252.00 per month = payment. Approval process will take 1 minute, so please fill out the form on our we= bsite: http://swung-watkins.debt-states.com Thank you. Best Regards Thad Coffman First Account Manager Remove Me Please http://dun.debt-states.com/r1/ _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From hftoatuwbw @ yahoo.com Fri Oct 15 04:23:38 2004 From: hftoatuwbw @ yahoo.com (Donnie Mcconnell) Date: Thu, 14 Oct 2004 15:23:38 -0400 (EDT) Subject: [SCore-users-jp] (no subject) Message-ID: Hi again, Here is Donnie Mcconnell. I write to you because we are accepting your mor= tgage application. Our office confirms you can get a $220.000 lo=C0n for a $252.00 per month = payment. Approval process will take 1 minute, so please fill out the form on our we= bsite: http://upheld-closeup.debt-states.com Thank you. Best Regards Donnie Mcconnell First Account Manager Remove Me Please http://dependent.debt-states.com/r1/ From hftoatuwbw @ yahoo.com Fri Oct 15 04:23:38 2004 From: hftoatuwbw @ yahoo.com (Donnie Mcconnell) Date: Thu, 14 Oct 2004 15:23:38 -0400 (EDT) Subject: [SCore-users-jp] [SCore-users] (no subject) Message-ID: Hi again, Here is Donnie Mcconnell. I write to you because we are accepting your mor= tgage application. Our office confirms you can get a $220.000 lo=C0n for a $252.00 per month = payment. Approval process will take 1 minute, so please fill out the form on our we= bsite: http://upheld-closeup.debt-states.com Thank you. Best Regards Donnie Mcconnell First Account Manager Remove Me Please http://dependent.debt-states.com/r1/ _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From kjqbgnasy @ yahoo.com Sat Oct 9 22:36:10 2004 From: kjqbgnasy @ yahoo.com (Marina Rowe) Date: Sat, 9 Oct 2004 06:36:10 -0700 Subject: [SCore-users-jp] (no subject) Message-ID: <200410031466.i93IthTw006571@www4.gmail.com> Find the realtor that's right for you. Find your dream home. Find the mort= gage you need. Apply today and Get a free quote from competing lenders. Find the right broker that will help you receive the lowest interst rate y= ou need. No obligations are neccesary! A broker will contact you within 24 hours. http://qfjqoyipdtusy.states-mortgage.com/?fsrbspasdoflhft You're on your way to getting the mortgage you deserve. rem: http://phgfbnxhmzzxklo.bucksstates.com/r1/?rcejfnfcqy From kjqbgnasy @ yahoo.com Sat Oct 9 22:36:10 2004 From: kjqbgnasy @ yahoo.com (Marina Rowe) Date: Sat, 9 Oct 2004 06:36:10 -0700 Subject: [SCore-users-jp] [SCore-users] (no subject) Message-ID: <200410031466.i93IthTw006571@www4.gmail.com> Find the realtor that's right for you. Find your dream home. Find the mort= gage you need. Apply today and Get a free quote from competing lenders. Find the right broker that will help you receive the lowest interst rate y= ou need. No obligations are neccesary! A broker will contact you within 24 hours. http://qfjqoyipdtusy.states-mortgage.com/?fsrbspasdoflhft You're on your way to getting the mortgage you deserve. rem: http://phgfbnxhmzzxklo.bucksstates.com/r1/?rcejfnfcqy _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From dzqghfucm @ yahoo.com Fri Oct 15 04:23:38 2004 From: dzqghfucm @ yahoo.com (Garland Mcclain) Date: Thu, 14 Oct 2004 15:23:38 -0400 (EDT) Subject: [SCore-users-jp] (no subject) Message-ID: Find the realtor that's right for you. Find your dream home. Find the mort= gage you need. Apply today and Get a free quote from competing lenders. Find the right broker that will help you receive the lowest interst rate y= ou need. No obligations are neccesary! A broker will contact you within 24 hours. http://nxbjftptr.statesmoneyz.com/?alwneyabq You're on your way to getting the mortgage you deserve. rem: http://midplzpbdzp.loanz-states.com/r1/?ofplqlchcwlmyze From dzqghfucm @ yahoo.com Fri Oct 15 04:23:38 2004 From: dzqghfucm @ yahoo.com (Garland Mcclain) Date: Thu, 14 Oct 2004 15:23:38 -0400 (EDT) Subject: [SCore-users-jp] [SCore-users] (no subject) Message-ID: Find the realtor that's right for you. Find your dream home. Find the mort= gage you need. Apply today and Get a free quote from competing lenders. Find the right broker that will help you receive the lowest interst rate y= ou need. No obligations are neccesary! A broker will contact you within 24 hours. http://nxbjftptr.statesmoneyz.com/?alwneyabq You're on your way to getting the mortgage you deserve. rem: http://midplzpbdzp.loanz-states.com/r1/?ofplqlchcwlmyze _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From gutzir @ yahoo.com Sat Oct 9 22:36:10 2004 From: gutzir @ yahoo.com (Jerry Gomez) Date: Sat, 9 Oct 2004 06:36:10 -0700 Subject: [SCore-users-jp] (no subject) Message-ID: <200410031428.i93NkrTw001345@www9.gmail.com> Find the realtor that's right for you. Find your dream home. Find the mort= gage you need. Apply today and Get a free quote from competing lenders. Find the right broker that will help you receive the lowest interst rate y= ou need. No obligations are neccesary! A broker will contact you within 24 hours. http://cyqstpnoup.states-moneyz.com/?nbbmslki You're on your way to getting the mortgage you deserve. rem: http://npyvgurqpmz.mtgstates.com/r1/?fupjbiup From gutzir @ yahoo.com Sat Oct 9 22:36:10 2004 From: gutzir @ yahoo.com (Jerry Gomez) Date: Sat, 9 Oct 2004 06:36:10 -0700 Subject: [SCore-users-jp] [SCore-users] (no subject) Message-ID: <200410031428.i93NkrTw001345@www9.gmail.com> Find the realtor that's right for you. Find your dream home. Find the mort= gage you need. Apply today and Get a free quote from competing lenders. Find the right broker that will help you receive the lowest interst rate y= ou need. No obligations are neccesary! A broker will contact you within 24 hours. http://cyqstpnoup.states-moneyz.com/?nbbmslki You're on your way to getting the mortgage you deserve. rem: http://npyvgurqpmz.mtgstates.com/r1/?fupjbiup _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users From sqfofbqssv @ yahoo.com Sat Oct 9 22:36:10 2004 From: sqfofbqssv @ yahoo.com (Eliseo Hewitt) Date: Sat, 9 Oct 2004 06:36:10 -0700 Subject: [SCore-users-jp] (no subject) Message-ID: <200410031461.i93MufTw008642@www8.warnerreprise.com> Find the realtor that's right for you. Find your dream home. Find the mort= gage you need. Apply today and Get a free quote from competing lenders. Find the right broker that will help you receive the lowest interst rate y= ou need. No obligations are neccesary! A broker will contact you within 24 hours. http://leech.equity-fix.com You're on your way to getting the mortgage you deserve. Regards Eliseo Hewitt From sqfofbqssv @ yahoo.com Sat Oct 9 22:36:10 2004 From: sqfofbqssv @ yahoo.com (Eliseo Hewitt) Date: Sat, 9 Oct 2004 06:36:10 -0700 Subject: [SCore-users-jp] [SCore-users] (no subject) Message-ID: <200410031461.i93MufTw008642@www8.warnerreprise.com> Find the realtor that's right for you. Find your dream home. Find the mort= gage you need. Apply today and Get a free quote from competing lenders. Find the right broker that will help you receive the lowest interst rate y= ou need. No obligations are neccesary! A broker will contact you within 24 hours. http://leech.equity-fix.com You're on your way to getting the mortgage you deserve. Regards Eliseo Hewitt _______________________________________________ SCore-users mailing list SCore-users @ pccluster.org http://www.pccluster.org/mailman/listinfo/score-users