Lambda, Kappa Architecture

AWS 기반 현대적 데이터 아키텍처 | Amazon Web Services

데이터 레이크, 데이터 웨어하우스 및 목적별 데이터 스토어의 원활한 통합 현대적 데이터 아키텍처는 분석에서 모든 규모에 하나의 솔루션을 제공할 경우 비효율적이라는 생각에 기반합니다. 단순히 데이터 레이크를 데이터 웨어하우스에 통합하는 것이 아니라, 데이터 레이크, 데이터 웨어하우스 및 목적별 스토어를 통합하여 통합 거버넌스와 간편한 데이터 이동을 지원하는 것입니다.

https://aws.amazon.com/ko/big-data/datalakes-and-analytics/modern-data-architecture/

천문학적으로 증가하는 데이터와 중요해지는 분석 능력에 따라 현대의 데이터 솔루션은 새로운 국면을 맞이하였다. MDA(Modern Data Architecture; 현대적 데이터 아키텍쳐)는 빠르고 간편한 서비스의 확장, 분석, 통합 관리 등을 가능케 해주는 아키텍쳐 패러다임이다.

확장 가능

목적별 분석

통합 데이

일반적으로 Data Warehouse, Data lake, Data store의 요소로 이루어진다.

Lambda Architecture

동일한 계산을 실행하는 Batch 시스템과 Streaming 시스템을 함께 운영하는

Kappa Architecture