Category: 빅데이터_Hadoop
hadoop hdfs 휴지통 비우기
휴지통 비우기 $HADOOP_HOME/conf/hdfs-site.xml 에 정의된 “fs.trash.interval” 옵션 (분단위) 의 속성에 따라 휴지통이 비워집니다. 아래의 명령을 사용하여 휴지통을 비울수 있습니다. 1...
Hadoop Job 목록 확인 및 종료하기
Hadoop job -list Hadoop job –kill <JobID>
Hive 날짜 함수
Hive 날짜 함수 (참조 : http://www.programkr.com/blog/MUDMyADMwYTz.html) 1.unix 타임스탬프 회전 시간 함수 문법: from_unixtime(bigint unixtime[, string format]) 복귀 값: string 설명: 전환의...
Hadoop server performance tuning
Hadoop server performance tuning To tune a Hadoop cluster from a DevOps perspective needs an understanding of the kernel principles...
Hadoop – Hive 성능 테스트 및 튜닝
Hadoop – Hive 성능 테스트 및 튜닝 | Hadoop 2012/05/25 16:35 Posted by 달빛방랑 근래에 진행 중이던 프로젝트에서 Hadoop +...
대용량 데이터(big data) 처리 관련 기술 요소
발췌 : http://wonchanlee.tumblr.com/post/5757863713/the-big-data-cookbook-big-data Big data는 요사이 인터넷상의 신조어로 떠오르고 있습니다. 이것은 많은 현대적 웹서비스들이 다루는 대량의 데이터를 참조합니다. 이 글은...
Cloud Storage에 관하여
발췌 : http://jmlab.tistory.com/16 Cloud Storage ? 클라우드 컴퓨팅에 관해 연구개발 일을 해오 보면서 2010년 중반까지 내 경험상 클라우드 스토리지라는 이름은...
[클러스터] Hadoop 설치 및 설정 밑 튜닝
zb4_pds_doc_66.pdfzb4_pds_doc_89.pdfHadoop 설치 및 설정