[클러스터] PVFS 설치 방법
pvfs 설정
시스템 환경
컴퓨터 3대
레드햇 7.3 (3대 모두에)
linux1.kdamduck.pe.kr —->203.249.6.182 —metadata server
linux2.kdamduck.pe.kr —->203.249.6.180— I/O 서버
linux3.kdamduck.pe.kr —->203.249.6.181—클라이언트
pvfs 구축 전 시스템환경 설정 (3대 모두에 설정)
vi /etc/hosts
203.249.6.182 linux1.kdamduck.pe.kr
203.249.6.180 linux2.kdamduck.pe.kr
203.249.6.181 linux3.kdamduck.pe.kr
vi /etc/sysconfig/network( 각 컴퓨터 호스트이름을 각 컴퓨터 모두에 설정)
HOSTNAME=linux1.kdamduck.pe.kr (이러한 방식으로 설정)
필요한 파일
pvfs-1.5.5.tgz
pvfs-kernel-1.5.5.tgz
pvfs-1.5.5.tgz , pvfs-kernel-1.5.5.tgz 를 3대 모두에 설치
mv pvfs-1.5.5.tgz /usr/local/src
mv pvfs-kernel-1.5.5.tgz /usr/local/src
tar zxvf pvfs-1.5.5.tgz
cd pvfs-1.5.5
./configure
make
make install
tar zxvf pvfs-kernel-1.5.5.tgz
cd pvfs-kernel-1.5.5
./configure –with-libpvfs-dir=../pvfs-1.5.5/lib
make
make install
ㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡ
metadata 서버 설정
mkdir /pvfs-meta
cd /pvfs-meta
/usr/local/bin/mkmgrconf (이하 mkmgrconf 설정)
This script will make the .iodtab and .pvfsdir files
in the metadata directory of a PVFS file system.
Enter the root directory:
/pvfs-meta //metadata를 저장할 디렉토리 이름 (바로 위에서 만든 디렉토리이다.)
Enter the user id of directory:
root
Enter the group id of directory:
root
Enter the mode of the root directory:
777
Enter the hostname that will run the manager:
linux1.kdamduck.pe.kr (mgr을 실행시킬 서버, 메타서버의 호스트이름을 쓰면 된다.)
Searching for host…success
Enter the port number on the host for manager:
(Port number 3000 is the default)
3000
Enter the I/O nodes: ( can use form node1, node2, …or nodename#-#,#,#)
linux2.kdamduck.pe.kr (I/O노드로서 쓸 호스트 이름을 적어 주면 된다. 이부분에서
한 참을 삽질을 했는데, 여러개의 컴퓨터가 네트워크에 연결되어 있더라도 위에서 설정한
/etc 밑에 있는 2개의 네트워크에 관련한 파일을 설정하지 않았을때 호스트이름을
찾을 수 없었으며, 또한 단순히 이 부분에 호스트이름 만을 넣어주었을 때도 다른 호스트
들을 찾을 수 없었다. 위에서 설정한 네트워크에 관련된 2개의 파일을 정확히 설정하고
호스트 이름과 도메인이 결합된 이름을 이 부분에 써 주었을 때 다른 호스트들을 찾을 수
있었다. )
Searching for hosts…success
I/O nodes : linux2.kdamduck.pe.kr
Enter the port number for the iods:
(Port number 7000 is the default)
7000
Done!
mgr 명령을 실행한다.
ps -aux | grep mgr로 프로세스를 확인해본다.
ㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡ
I/O 서버 설정
mkdir /pvfs-data
chmod 700 /pvfs-data
chown nobody.nobody /pvfs-data
cp /usr/local/src/pvfs-1.5.5/system/iod.conf /etc/iod.conf
iod명령을 실행한다.
ps -aux | grep iod로 프로세스를 확인해본다.
(/pvfs-data 디렉토리의 소유권을 nobody로 바꾸어 주지 않으면
iod는 실행 되지 않는다.)
ㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡ
클라이언트 설정
mkdir /lib/modules/2.4.18-3/misc
cp /usr/local/src/pvfs-kernel-1.5.5/pvfs.o /lib/modules/2.4.18-3/misc
mkdir /mnt/pvfs
touch /etc/pvfstab
chmod a+r /etc/pvfstab
vi /etc/pvfstab
linux1.kdamduck.pe.kr:/pvfs-meta /mnt/pvfs pvfs port=3000 0 0
pvfsd(어디서 실행해야 하는지는 확실히 모른다..그냥 이 위치 즈음에서 실행~)
mknod /dev/pvfsd c 60 0
insmod pvfs
mount.pvfs linux1.kdamduck.pe.kr:/pvfs-meta /mnt/pvfs
mount 명령으로 확인해본다.
ㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡㅡ
메타서버는 그냥 메타 서버로서 쓰고,
I/O 서버를 I/O 서버이면서 클라이언트로 , 클라이언트를 클라이언트면서 I/O 서버로
쓰려면 메타서버 설정에서 Enter the I/O nodes: ( can use form node1, node2, …or nodename#-#,#,#)
부분에 linux2.kdamduck.pe.kr, linux3.kdamduck.pe.kr 이라 설정해주고,
위의 I/O서버 설정과 클라이언트 설정을 linux2,linux3에 각각 설정해 준다.
그냥 미천한 팁이었습니다…
