Search

빅데이터 처리 시스템 도입 계획

빅데이터 처리를 위한 환경 파악
처리해야 할 빅데이터의 3V 특징 파악
클러스터 구축 방법
목적에 맞는 처리 시스템 계획
빅데이터 처리 시스템 구축을 위한 세부 계획 수립
정보 시스템 계획 및 수립 - 빅데이터 처리 시스템 도입 및 설정에 필요한 계획 수립
HW/SW 아키텍쳐 설계 - 클러스터 구축을 위한 제반 환경 점검 및 체크리스트 작성
빅데이터 저장 방식 확인 - 관계형 데이터베이스, 분산파일 시스템, NoSQL 데이터베이스 등
세부 운영 계획 수립 - 보안 운영 계획, 네트워크/시스템 관리 계획, 가용성/장애관리 계획, 서비스 관리 계획, 자원 관리 계획 등
기존 시스템과의 연계 가능성 고려
기존 시스템 파악
기존 DBMS와 하둡 시스템 간의 연계 툴 조사
비관계형 데이터베이스(NoSQL) 툴 조사
빅데이터 처리 환경 구축
배포판을 설치 후, 시나리오에 따라 처리 시스템을 검증하고 특장점을 문서화 - 하둡 배포판에는 아파치 하둡, 맵알 하둡, 클라우데라 하둡, 호튼웍스 하둡의 4가지가 있는데, 이들은 공통적으로 Map Reduce라는 엔진을 가지지만 Ecosystem을 구성하는 툴이 다르다.