[클러스터] 고해상도 수치 모의 병렬 프로그램 MM5-MPP 벤치마킹
고해상도 수치 모의 병렬 프로그램 MM5-MPP 벤치마킹 테스트 보고서
===============================================================
테스트 진행 자 : 서 진우 ( alang@syszone.co.kr )
테스트 진행 일 : 2004년 8월 4일
===============================================================
1. 시스템별 테스트 환경 구축 하기
MM5 설치 및 시스템 환경 구축 하기
1.1 컴파일러 설치
PGI, Intel 컴파일러 설치
1.2 MPI 병렬 프로그램 설치
여기서는 LAM-MPI 를 사용하였습니다. MPICH 와 LAM-MPI 의 경우 LAM-MPI 가 MPICH
보다 30% 정도의 성능 향상이 있었고, 안정성에서도 좋을것을 확인함.
( 실제 MPICH 의 경우 MM5 수행중에 프로그램이 비정상 종료되는 경우가 빈번히 발생함 )
1.3 MM5/MPP 설치
MM5/MPP download : http://www.mmm.ucar.edu/mm5/ 에서 MM5V3와 MPP 다운
# wget ftp://ftp.ucar.edu/mesouser/MM5V3/MM5.TAR.gz
# wget ftp://ftp.ucar.edu/mesouser/MM5V3/MPP.TAR.gz
# cd /home/clunix
# tar xzvf MM5.TAR.gz
# cd MM5
# tar xzvf MPP.TAR.gz
MM5 의 경우 원래 UNIX (cray) 시스템을 표준 시스템으로 만든 프로그램으로
리눅스에서 사용할 경우, 그리고 64bit 환경에서 사용할 경우 여러가지 Source
의 수정을 해 주어야 한다. 자세한 수정 과정은 각 플랫폼별 설치 과정에서
자세히 설명 하도록 하겠다. 여기서는 기본적으로 리눅스 OS 에 설치 하는 방법에
대해서만 다루도록 하겠다.
먼저 MM5_HOME 에 configure.user 란 파일을 configure.user.unix 로 변경한다.
그런 후 configure.user.linux 를 configure.user 로 변경한다.
# mv configure.user configure.user.unix
# mv configure.linux configure.user
그런 후 configure.user.unix 의 [7. MPP options ] 부분과 [ 7g. LINUX PCs.
Need Portland Group pgf77 and MPICH ] 부분을 복사해서 configure.user 의
[ 6. Physics option ] 다음 부분에 추가 한다.
그런 후 FCFLAGS or CFLAGS 등의 옵션을 프로세스 아키텍쳐에 맞게 변경한다.
Xeon 의 경우
FCFLAGS = -fast -Mcray=pointer -tp p7 -pc 32 -Mnoframe -byteswapio
LDOPTIONS = -fast -Mcray=pointer -tp p7 -pc 32 -Mnoframe -byteswapio
Opeteron 의 경우
FCFLAGS = -fast -Mcray=pointer -tp k8-64 -pc 64 -Mnoframe -byteswapio -DDEC_ALPHA
LDOPTIONS = -fast -Mcray=pointer -tp k8-64 -pc 64 -Mnoframe -byteswapio
그런 후
# vi MPP/RSL/Makefile.RSL
—————————————————-
INCLUDES 세션에 -I/usr/local/lam/include 를 추가한다.
만일 MPI 프로그램을 MPICH를 사용할 경우에는
-I/usr/local/mpich/include 를 추가한다.
INCLUDES = -I$(MPPTOP) -I$(MPPTOP)/$(MPP_LAYER) \\
-I$(DEVTOP)/pick -I$(MPPTOP)/debug -I$(RSLLOC) \\
-I/usr/local/lam/include
—————————————————-
# vi MPP/RSL/RSL/makefile.linux
—————————————————-
CFLAGS 세션에 -I/usr/local/lam/include 추가
CFLAGS = -I$(IDIR) -DMPI -DRSL_SYNCIO -Dlinux -DSWAPBYTES -O \\
-I/usr/local/lam/include
—————————————————-
# vi MPP/RSL/RSL/rsl_mpi_compat.c
—————————————————-
mpi_init 로 문자열을 검색하면…
mpi_init___ 로 된 부분이 있다. 이것을 mpi_init_ 로 변경해 준다.
—————————————————-
그런 후
# vi MPP/RSL/RSL/makefile
—————————————————-
linux 세션 부분에 LINUX_MPIHOME=/usr/local/mpich 로 되어져 있는데
이부분을 각 MPI 프로그램 설치 환경에 맞게 변경한다.
linux :
$(MAKE) -f makefile.linux LINUX_MPIHOME=/usr/local/lam $(MAKE_OPTS) all
—————————————————-
# cd MPP/RSL/RSL
# make linux
# cd /home/clunix/MM5
# make mpp
무사히 컴파일이 되면 /home/clunix/MM5/Run 디렉토리 밑에 mm5.mpp 란 실행
파일이 생길 것이다. 만일 그렇지 않으면 configure.user 를 적절히 수정해야 한다.
# make mm5.deck
무사히 컴파일이 되면 /home/clunix/MM5 디렉토리 밑에 mm5.deck 가 생긴다.
이것을 실행 한다.
# ./mm5.deck
그럼 /home/clunix/MM5/Run 밑에 mmlif 가 생성된다.
# cd /home/clunix/MM5/Run
MM5 사이트에서 테스트 INPUT DOMAIN DATA 를 다운 받아서 테스트 한다.
# wget ftp://ftp.ucar.edu/mesouser/MM5V3/TESTDATA/input2mm5.tar.gz
# tar xzvf input2mm5.tar.gz
-rw-r–r– bruyerec/users 1825164 2003-07-01 02:47:46 BDYOUT_DOMAIN1
-rw-r–r– bruyerec/users 170936 2003-07-01 02:47:46 LOWBDY_DOMAIN1
-rw-r–r– bruyerec/users 2889044 2003-07-01 02:47:46 MMINPUT_DOMAIN1
-rw-r–r– bruyerec/users 210980 2003-07-01 07:15:27 TERRAIN_DOMAIN2
이제 LAM-MPI 를 실행한다. LAM은 일반 계정에서 실행되어져야 한다.
# lamboot -v /etc/lamhost
—————————————————–
LAM 6.5.9/MPI 2 C++/ROMIO – Indiana University
Executing hboot on n0 (otn1 – 2 CPUs)…
Executing hboot on n1 (otn2 – 2 CPUs)…
Executing hboot on n2 (otn3 – 2 CPUs)…
topology done
—————————————————–
# mpirun -np 1 mm5.mpp
otn1 — rsl_nproc_all 1, rsl_myproc 0
수행이 완료되면..
rsl.error.000x
rsl.out.000x
show_domain_000x 가 생성된다.
여기서 주의 할점으로 실제 이 Data file 이 생성되는 디스크 장치가
한곳으로 정해져 있어야 한다. 즉 NFS 방식과 같은 디스크 저장 방식을 사용해야 한다.
여러 노드로 동시에 작업을 할 경우에 생성되는 데이터 파일간의 의존되는 부분이
있는데 이 부분이 각 노드별로 별로로 관리될 경우 mpi 데몬에서 에러를 발생한다.
그러므로 데이터가 생성되는 곳의 저장방식은 Sync 방식이 아닌 share 방식으로
나가야 한다. ( share 방식도 가능함, 하지만 데이터 파일 수집등의 문제가 있음
실제 성능은 sync 방식으로 실행하는 것이 더 나음 )
이제 시스템 별 구체적인 변경 사항에 대해 알아보도록 하겠다.
– Opteron ( AMD-64bit )
configure.user 의 RWORDSIZE 값을 4에서 8로 변경함.
configure.user 의 FCFLACS 세션에 -qrealsize=8 값을 추가함.
MPP/RSL/RSL/rsl.inc 파일안의 RSL_REAL 파라미터 값을 0 에서 1로 변경함.
parameter (RSL_REAL=1)
configure.user 에서 PGI Compiler 해당 FCFLAGS 에 -DDEC_ALPHA 를 추가함.
MPI Building 시에 CFLAGS , CPPFLAGS 에 -DDEC_ALPHA 를 추가함.
/// Opteron system configure.user Sample File ///
——————————————————————————
SHELL = /bin/sh
.SUFFIXES: .F .i .o .f
RUNTIME_SYSTEM = “PC_PGF77”
LIBINCLUDE = $(DEVTOP)/include
FC = pgf77
FCFLAGS = -I$(LIBINCLUDE) -fast -Mcray=pointer -tp k8-64 -pc 64 -Mnoframe \\
-byteswapio -DDEC_ALPHA -qrealsize=8
CPP = /lib/cpp CFLAGS = -O3 -DDEC_ALPHA
CPPFLAGS = -I$(LIBINCLUDE) -DDEC_ALPHA
LDOPTIONS = -fast -Mcray=pointer -tp k8-64 -pc 64 -Mnoframe -byteswapio
LOCAL_LIBRARIES =
MAKE = make -i -r
AR = ar ru
RM = rm -f
RM_CMD = $(RM) *.CKP *.ln *.BAK *.bak *.o *.i core errs ,* *~ *.a \\
.emacs_* tags TAGS make.log MakeOut *.f !
GREP = grep -s
CC = cc
FDDAGD = 0
FDDAOBS = 0
MAXNES = 2
MIX = 49
MJX = 52
MKX = 23
IMPHYS = “4,4,1,1,1,1,1,1,1,1”
MPHYSTBL = 0
ICUPA = “3,3,1,1,1,1,1,1,1,1”
IBLTYP = “5,5,2,2,2,2,2,2,2,1”
FRAD = “2,0,0,0,0”
IPOLAR = 0
ISOIL = 1
ISHALLO = “0,0,0,0,0,0,0,0,0,0”
MPP_LAYER=RSL
PROCMIN_NS = 1
PROCMIN_EW = 1
ASSUME_HOMOGENEOUS_ENVIRONMENT = 1
RUNTIME_SYSTEM = “linux”
MPP_TARGET=$(RUNTIME_SYSTEM)
LINUX_MPIHOME = /usr/local/lam
MFC = $(LINUX_MPIHOME)/bin/mpif77
MCC = $(LINUX_MPIHOME)/bin/mpicc
MLD = $(LINUX_MPIHOME)/bin/mpif77
FCFLAGS = -fast -Mcray=pointer -tp k8-64 -pc 64 -Mnoframe -byteswapio \\
-DDEC_ALPHA -qrealsize=8
LDOPTIONS = -fast -Mcray=pointer -tp k8-64 -pc 64 -Mnoframe -byteswapio
LOCAL_LIBRARIES = -L$(LINUX_MPIHOME)/lib -lmpi -llam
MAKE = make -i -r
AWK = awk
SED = sed
CAT = cat
CUT = cut
EXPAND = expand
M4 = m4
CPP = /lib/cpp -C -P -traditional
CPPFLAGS = -DMPI -Dlinux -DSYSTEM_CALL_OK -DDEC_ALPHA
CFLAGS = -DMPI -I$(LINUX_MPIHOME)/include -DDEC_ALPHA
ARCH_OBJS = milliclock.o
IWORDSIZE = 4
RWORDSIZE = 8
LWORDSIZE = 4
.F.i:
$(RM) $@
$(CPP) $(CPPFLAGS) $*.F > $@
mv $*.i $(DEVTOP)/pick/$*.f
cp $*.F $(DEVTOP)/pick
.c.o:
$(RM) $@ && \\
$(CC) -c $(CFLAGS) $*.c
.F.o:
$(RM) $@
$(FC) -c $(FCFLAGS) $*.F
.f.o:
$(RM) $@
$(FC) -c $(FCFLAGS) $*.f
——————————————————————————
;;; LOCAL_LIBRARIES = -L$(LINUX_MPIHOME)/lib -lmpi -llam 부분은 MPI 프로그램을
LAM-MPI로 했을 경우에 추가 되는 부분이다. MPICH 사용시에는 반드시 ..
LOCAL_LIBRARIES = -L$(LINUX_MPIHOME)/lib -lmpich -lfmpich 로 변경해 주어야 한다
– Xeon System ( IA-32bit )
Xeon의 경우는 그냥 MM5 리눅스 표준 환경에 맞게 구축하면 크게 무리 없이 설치할
수 있습니다. 예제 configure.user 파일을 참조하라.
/// Xeon System ‘s Configure.user Sample File ///
——————————————————————————
SHELL = /bin/sh
.SUFFIXES: .F .i .o .f
RUNTIME_SYSTEM = “PC_PGF77”
LIBINCLUDE = $(DEVTOP)/include
FC = pgf90
FCFLAGS = -I$(LIBINCLUDE) -fast -Mcray=pointer -tp p7 -pc 32 -Mnoframe -byteswapio
CPP = /lib/cpp
CFLAGS = -O
CPPFLAGS = -I$(LIBINCLUDE)
LDOPTIONS = -fast -Mcray=pointer -tp p7 -pc 32 -Mnoframe -byteswapio
LOCAL_LIBRARIES =
MAKE = make -i -r
AR = ar ru
RM = rm -f
RM_CMD = $(RM) *.CKP *.ln *.BAK *.bak *.o *.i core errs ,* *~ *.a \\
.emacs_* tags TAGS make.log MakeOut *.f !
GREP = grep -s
CC = cc
FDDAGD = 0
FDDAOBS = 0
MAXNES = 2
MIX = 49
MJX = 52
MKX = 23
IMPHYS = “4,4,1,1,1,1,1,1,1,1”
MPHYSTBL = 0
ICUPA = “3,3,1,1,1,1,1,1,1,1”
IBLTYP = “5,5,2,2,2,2,2,2,2,1”
FRAD = “2,0,0,0,0”
IPOLAR = 0
ISOIL = 1
ISHALLO = “0,0,0,0,0,0,0,0,0,0”
MPP_LAYER=RSL
PROCMIN_NS = 1
PROCMIN_EW = 1
ASSUME_HOMOGENEOUS_ENVIRONMENT = 1
RUNTIME_SYSTEM = “linux”
MPP_TARGET=$(RUNTIME_SYSTEM)
LINUX_MPIHOME = /usr/local/lam
MFC = $(LINUX_MPIHOME)/bin/mpif77
MCC = $(LINUX_MPIHOME)/bin/mpicc
MLD = $(LINUX_MPIHOME)/bin/mpif77
FCFLAGS = -fast -Mcray=pointer -tp p7 -pc 32 -Mnoframe -byteswapio
LDOPTIONS = -fast -Mcray=pointer -tp p7 -pc 32 -Mnoframe -byteswapio
LOCAL_LIBRARIES = -L$(LINUX_MPIHOME)/lib -lmpi
MAKE = make -i -r
AWK = awk
SED = sed C
AT = cat
CUT = cut
EXPAND = expand
M4 = m4
CPP = /lib/cpp -C -P -traditional
CPPFLAGS = -DMPI -Dlinux -DSYSTEM_CALL_OK
CFLAGS = -DMPI -I$(LINUX_MPIHOME)/include
ARCH_OBJS = milliclock.o
IWORDSIZE = 4
RWORDSIZE = 4
LWORDSIZE = 4
.F.i:
$(RM) $@
$(CPP) $(CPPFLAGS) $*.F > $@
mv $*.i $(DEVTOP)/pick/$*.f
cp $*.F $(DEVTOP)/pick
.c.o:
$(RM) $@ && \\
$(CC) -c $(CFLAGS) $*.c
.F.o:
$(RM) $@
$(FC) -c $(FCFLAGS) $*.F
.f.o:
$(RM) $@
$(FC) -c $(FCFLAGS) $*.f
—————————————————————————–
– Itenium System ( IA-64bit )
Itenium System 의 경우 Fortran Compiler 를 PGI 가 아닌 Intel Fortran Compiler
를 사용한다. 그러므로 configure.user 및 기타 Makefile 의 Compile Option 을 모두
Intel Compile Option 으로 변경을 해 주어야 한다.
configure.user 의 수정 내용으로 ..
FC = /opt/intel_fc_80/bin/ifort
FCFLAGS = -I$(LIBINCLUDE) -O3 -fpp -convert big_endian -DDEC_ALPHA
CFLAGS = -I$(LIBINCLUDE) -O3 -fpp -convert big_endian -DDEC_ALPHA
CPPFLAGS = -I$(LIBINCLUDE) -fpp -convert big_endian -DDEC_ALPHA
LDOPTIONS = -O3 -I$(LIBINCLUDE) -fpp -convert big_endian -DDEC_ALPHA
LOCAL_LIBRARIES = -L$(LINUX_MPIHOME)/lib -lmpi -llam
MPP/RSL/RSL/makefile.linux 의 수정 내용으로
CFLAGS = -I$(IDIR) -DMPI -DRSL_SYNCIO -Dlinux -DSWAPBYTES -O \\
-I/usr/local/lam/include
FCFLAGS = -I$(LIBINCLUDE) -fpp -convert big_endian -DDEC_ALPHA
FFLAGS = -O -convert big_endian -DDEC_ALPHA
등이 있다.
/// Itenium System ‘s Configure.user Sample File ///
—————————————————————————–
SHELL = /bin/sh
.SUFFIXES: .F .i .o .f
RUNTIME_SYSTEM = “PC_PGF77”
LIBINCLUDE = $(DEVTOP)/include
FC = /opt/intel_fc_80/bin/ifort
FCFLAGS = -I$(LIBINCLUDE) -O3 -fpp -convert big_endian -DDEC_ALPHA
CPP = /lib/cpp
CFLAGS = -I$(LIBINCLUDE) -O3 -fpp -convert big_endian -DDEC_ALPHA
CPPFLAGS = -I$(LIBINCLUDE) -fpp -convert big_endian -DDEC_ALPHA
LDOPTIONS = -O3 -I$(LIBINCLUDE) -fpp -convert big_endian -DDEC_ALPHA
LOCAL_LIBRARIES =
MAKE = make -i -r
AR = ar ru
RM = rm -f RM_CMD = $(RM) *.CKP *.ln *.BAK *.bak *.o *.i core errs ,* *~ *.a \\
.emacs_* tags TAGS make.log MakeOut *.f !
GREP = grep -s
CC = cc
FDDAGD = 0
FDDAOBS = 0
MAXNES = 2
MIX = 49
MJX = 52
MKX = 23
IMPHYS = “4,4,1,1,1,1,1,1,1,1”
MPHYSTBL = 0
ICUPA = “3,3,1,1,1,1,1,1,1,1”
IBLTYP = “5,5,2,2,2,2,2,2,2,1”
FRAD = “2,0,0,0,0”
IPOLAR = 0
ISOIL = 1
ISHALLO = “0,0,0,0,0,0,0,0,0,0”
MPP_LAYER=RSL
PROCMIN_NS = 1
PROCMIN_EW = 1
ASSUME_HOMOGENEOUS_ENVIRONMENT = 1
RUNTIME_SYSTEM = “linux”
MPP_TARGET=$(RUNTIME_SYSTEM)
LINUX_MPIHOME = /usr/local/lam
MFC = $(LINUX_MPIHOME)/bin/mpif77
MCC = $(LINUX_MPIHOME)/bin/mpicc
MLD = $(LINUX_MPIHOME)/bin/mpif77
FCFLAGS = -O3 -I$(LIBINCLUDE) -fpp -convert big_endian -DDEC_ALPHA
LDOPTIONS = -O3
LOCAL_LIBRARIES = -L$(LINUX_MPIHOME)/lib -lmpi -llam
MAKE = make -i -r
AWK = awk
SED = sed
CAT = cat
CUT = cut
EXPAND = expand
M4 = m4
CPP = /lib/cpp -C -P -traditional
CPPFLAGS = -DMPI -Dlinux -DDEC_ALPHA -traditional
CFLAGS = -DMPI -I$(LINUX_MPIHOME)/include
ARCH_OBJS = milliclock.o
IWORDSIZE = 4
RWORDSIZE = 8
LWORDSIZE = 4
.F.i:
$(RM) $@
$(CPP) $(CPPFLAGS) $*.F > $@
mv $*.i $(DEVTOP)/pick/$*.f
cp $*.F $(DEVTOP)/pick
.c.o:
$(RM) $@ && \\
$(CC) -c $(CFLAGS) $*.c
.F.o:
$(RM) $@
$(FC) -c $(FCFLAGS) $*.F
.f.o:
$(RM) $@
$(FC) -c $(FCFLAGS) $*.f
—————————————————————————
2. 성능테스트 결과
2.1 프로세스별 성능 결과 process_num/time
np=1 경우
—————————————————————————
opteron :
[clunix@otn1 Run]$ time mpirun -np 1 mm5.mpp
otn1 — rsl_nproc_all 1, rsl_myproc 0
real 3m30.214s
user 0m0.000s
sys 0m0.000s
itenium :
[clunix@rx2600 Run]$ time mpirun -np 1 mm5.mpp
rx2600 — rsl_nproc_all 1, rsl_myproc 0
real 4m0.434s
user 0m0.001s
sys 0m0.001s
xeon :
[clunix@www1 Run]$ time mpirun -np 1 mm5.mpp
www1 — rsl_nproc_all 1, rsl_myproc 0
real 7m6.661s
user 0m0.000s
sys 0m0.000s
—————————————————————————-
np=2 경우
—————————————————————————-
opteron :
[clunix@otn1 Run]$ time mpirun -np 2 mm5.mpp
otn1 — rsl_nproc_all 2, rsl_myproc 0
otn1 — rsl_nproc_all 2, rsl_myproc 1
real 2m0.184s
user 0m0.000s
sys 0m0.000s
itenium :
[clunix@rx2600 Run]$ time mpirun -np 2 mm5.mpp
rx2600 — rsl_nproc_all 2, rsl_myproc 0
rx2600 — rsl_nproc_all 2, rsl_myproc 1
real 2m31.815s
user 0m0.002s
sys 0m0.003s
xeon :
[clunix@www3 Run]$ time mpirun -np 2 mm5.mpp
www3 — rsl_nproc_all 2, rsl_myproc 0
www3 — rsl_nproc_all 2, rsl_myproc 1
real 4m16.842s
user 0m0.000s
sys 0m0.000s
————————————————————————–
np=4 경우
————————————————————————–
opteron :
[clunix@otn1 Run]$ time mpirun -np 4 mm5.mpp
otn1 — rsl_nproc_all 4, rsl_myproc 0
otn1 — rsl_nproc_all 4, rsl_myproc 1
otn2 — rsl_nproc_all 4, rsl_myproc 2
otn2 — rsl_nproc_all 4, rsl_myproc 3
real 1m51.920s
user 0m0.000s
sys 0m0.000s
xeon :
[clunix@www1 Run]$ time mpirun -np 4 mm5.mpp
www1 — rsl_nproc_all 4, rsl_myproc 0
www2 — rsl_nproc_all 4, rsl_myproc 1
www3 — rsl_nproc_all 4, rsl_myproc 2
www3 — rsl_nproc_all 4, rsl_myproc 3
real 3m31.522s
user 0m0.000s
sys 0m0.010s
———————————————————————–
np=6 경우
———————————————————————–
opteron :
[clunix@otn1 Run]$ time mpirun -np 6 mm5.mpp
otn1 — rsl_nproc_all 6, rsl_myproc 0
otn1 — rsl_nproc_all 6, rsl_myproc 1
otn2 — rsl_nproc_all 6, rsl_myproc 2
otn2 — rsl_nproc_all 6, rsl_myproc 3
otn3 — rsl_nproc_all 6, rsl_myproc 4
otn3 — rsl_nproc_all 6, rsl_myproc 5
real 1m39.816s
user 0m0.000s
sys 0m0.000s
xeon :
[clunix@www1 Run]$ time mpirun -np 6 mm5.mpp
www1 — rsl_nproc_all 6, rsl_myproc 4
www1 — rsl_nproc_all 6, rsl_myproc 0
www3 — rsl_nproc_all 6, rsl_myproc 2
www3 — rsl_nproc_all 6, rsl_myproc 3
www2 — rsl_nproc_all 6, rsl_myproc 1
www2 — rsl_nproc_all 6, rsl_myproc 5
real 3m28.397s
user 0m0.000s
sys 0m0.010s
———————————————————————
2.2 프로세스별 시스템 자원(CPU, NET) 사용 측정
np=2
———————————————————————
분석 : process 갯수를 2개를 사용. 즉 Dual process system 1 node 로 계산을
할 경우 가장 높은 CPU 사용함을 볼수 있음. (평균 95% 정도)
1 node 일 경우 disk 작업을 local file system 에 작업 함으로 네트워크 부하
는 거의 없는 걸 확인 할수 있음.
———————————————————————
opteron :
——————————————————————–
– cpu
94.0 2.0
96.2 2.1
94.6 2.2
96.2 2.3
89.4 2.2
90.8 2.3
96.8 2.2
98.6 2.3
99.7 2.2
91.6 2.3
97.6 2.2
99.2 2.3
96.8 2.2
98.1 2.3
98.8 2.2
90.3 2.3
97.4 2.2
– net
14.18 Kb/s 1.40 Kb/s
7.32 Kb/s 3.40 Kb/s
88.40 Kb/s 11.51 Kb/s
4.47 Kb/s 1.13 Kb/s
87.20 Kb/s 12.26 Kb/s
3.33 Kb/s 1.88 Kb/s
80.02 Kb/s 13.13 Kb/s
4.27 Kb/s 1.88 Kb/s
82.96 Kb/s 15.74 Kb/s
14.41 Kb/s 1.13 Kb/s
——————————————————————–
itenium :
——————————————————————–
– cpu
99.9 2.3
99.9 2.3
91.2 4.9
90.7 5.1
92.6 5.3
89.2 5.5
94.4 5.3
89.0 5.5
93.8 5.3
87.4 5.5
93.4 5.3
86.7 5.5
93.4 5.4
86.2 5.5
93.0 5.3
85.4 5.5
92.4 5.3
– net
2.53 Kb/s 0 Bits/s
73.01 Kb/s 9.55 Kb/s
11.77 Kb/s 0 Bits/s
3.48 Kb/s 0 Bits/s
74.42 Kb/s 9.78 Kb/s
11.41 Kb/s 0 Bits/s
75.98 Kb/s 9.78 Kb/s
12.00 Kb/s 0 Bits/s
4.06 Kb/s 0 Bits/s
83.52 Kb/s 9.78 Kb/s
2.77 Kb/s 0 Bits/s
75.37 Kb/s 9.78 Kb/s
——————————————————————-
xeon :
——————————————————————-
– cpu
90.8 4.0
94.4 4.2
92.4 4.0
94.2 4.1
93.0 4.0
94.0 4.1
92.4 4.0
93.9 4.1
91.1 4.0
92.5 4.1
92.0 4.1
93.5 4.1
92.4 4.0
93.0 4.0
93.3 4.2
92.5 4.0
93.3 4.1
– net
10.64 Kb/s 2.42 Kb/s
8.54 Kb/s 9.81 Kb/s
7.85 Kb/s 8.06 Kb/s
12.92 Kb/s 428 Bits/s
8.02 Kb/s 9.29 Kb/s
7.25 Kb/s 7.50 Kb/s
12.73 Kb/s 3.04 Kb/s
7.84 Kb/s 7.58 Kb/s
8.94 Kb/s 8.33 Kb/s
8.47 Kb/s 1.42 Kb/s
7.63 Kb/s 7.28 Kb/s
9.65 Kb/s 9.06 Kb/s
10.64 Kb/s 2.42 Kb/s
7.13 Kb/s 8.33 Kb/s
8.15 Kb/s 8.40 Kb/s
11.05 Kb/s 428 Bits/s
6.97 Kb/s 6.62 Kb/s
6.75 Kb/s 7.06 Kb/s
——————————————————————
np=6
——————————————————————
분석 : 다중 프로세스를 사용할 경우 CPU 사용량이 현저히 줄어드는 것을 볼수 있음.
특히 옵테론의 경우 50% 정도의 사용량을 보이고 있는데, 이는 실제 테스트 를 하는
INPUT_DOMAIN 이 small size 임으로 실제 다른 병목등을 고려할때 Process 2개로
작업하기에 적당한 작업 규모인거 같음.
Disk 작업을 network file system 을 이용하여 작업을 함으로 각 서버의 Network
bandwidth 가 평균 27M 정도 나오는 것을 볼수 있다.
——————————————————————-
opteron :
——————————————————————-
– cpu
67.7 2.0
68.5 2.0
67.2 1.9
63.6 2.0
66.3 2.0
67.3 1.9
63.3 2.0
62.1 2.0
64.0 1.9
63.0 2.0
62.6 2.0
67.1 2.0
63.3 2.0
62.1 2.0
64.0 1.9
63.0 2.0
62.6 2.0
– net
37.97 Mb/s 28.13 Mb/s
33.77 Mb/s 35.50 Mb/s
22.18 Mb/s 27.66 Mb/s
25.71 Mb/s 19.61 Mb/s
31.45 Mb/s 31.88 Mb/s
22.36 Mb/s 28.03 Mb/s
38.73 Mb/s 29.13 Mb/s
34.91 Mb/s 33.52 Mb/s
22.86 Mb/s 30.29 Mb/s
26.57 Mb/s 19.65 Mb/s
29.56 Mb/s 29.29 Mb/s
23.02 Mb/s 28.71 Mb/s
——————————————————————-
xeon :
——————————————————————-
– cpu
80.8 1.8
87.0 3.7
90.8 3.8
89.0 3.8
92.8 3.7
75.5 1.9
71.9 1.8
85.7 3.7
88.2 3.8
90.4 3.8
92.7 3.7
73.8 1.9
69.6 1.8
86.1 3.7
76.0 3.7
77.3 3.8
80.9 3.8
82.3 3.7
– net
20.61 Mb/s 19.98 Mb/s
24.49 Mb/s 24.91 Mb/s
24.14 Mb/s 24.43 Mb/s
19.69 Mb/s 18.99 Mb/s
23.99 Mb/s 24.28 Mb/s
21.26 Mb/s 21.69 Mb/s
19.77 Mb/s 18.99 Mb/s
23.86 Mb/s 24.21 Mb/s
24.99 Mb/s 24.95 Mb/s
19.78 Mb/s 19.00 Mb/s
23.39 Mb/s 23.62 Mb/s
22.21 Mb/s 22.41 Mb/s
———————————————————————
주요 사이트
http://www.mmm.ucar.edu/mm5/mpp/helpdesk/index.html
http://mailman.ucar.edu/pipermail/mm5-users/
http://www.mmm.ucar.edu/mm5/mm5v3/clues/mm5-intel2.html
![[클러스터] LInux High Performance Computer Clustering (Teragon)](http://nblog.syszone.co.kr/wp-content/themes/hueman/assets/front/img/thumb-medium-empty.png)
