빅데이터 처리 시스템을 도입하기 이전, 시중에 개발되어있는 각종 제품들의 기능을 비교하고 상황에 맞는 도구를 사용해야 한다.
데이터 처리 기능
배치 처리
여러 데이터 소스로부터 유입된 데이터의 일괄처리 - 일간, 주간, 월간, 연간
Hadoop-Ecosystem
AWS
실시간 처리
현재 발생하는 상황 파악 및 발생 원인의 실시간 분석 - In-Memory 처리기술 필요
Storm, Esper
확장성
클라우데라 EDH 기반의 AWS
결함허용 시스템
AW: multiple region, load balancing, active/standby, data mirroring, data replication
Hadoop Ecosystem
