Hadoop 클러스터 구축 과정

1. Zookeeper 설치 1) 패키지 설치 zookeeper, zookeeper-server 2) 설정파일 배포 - zoo.cfg (myid 설정) 2. Hadoop 설치 1) 네임노드 - 패키지 설치 (hadoop, hadoop-hdfs-namenode) - 네임노드용 디렉토리 생성..

Hadoop HA cluser를 세팅하기 전에 사전작업으로 Hadoop-SingleNode-Install => Hadoop-multiNode-Install 이 구성되어 있는 상태에서 HA cluster를 세팅하는것을 권장한다. HA(High Availability) 설정이란 active/standby 설정으로 구성하여, namenode 장애시에도 서비스가 중단되지 않도록 구성한다. zookeeper 다운로드 및 설치 zookeeper achrive site 에서 zookeeper download zookeeper설정 zookeeper 배포 zookeeper가 실행될 node들에 aws1번 서버에서 설정한 zookeeper를 압축해서 배포한다.