개요
Databricks(데이터브릭스)는 Apache Spark 창시자들이 설립한 미국의 데이터·AI 플랫폼 기업이다. 데이터 레이크하우스(Data Lakehouse) 아키텍처를 창시했으며, AI 및 머신러닝 워크로드를 통합한 플랫폼을 제공한다.
주요 제품 및 기술
- Lakehouse: 데이터 레이크와 데이터 웨어하우스의 장점을 결합한 통합 플랫폼.
- Lakebase: 데이터베이스 플랫폼으로, PostgreSQL 호환성을 유지하면서 트랜잭션 데이터를 델타레이크·아파치 아이스버그 같은 개방형 컬럼형 포맷에 직접 기록.
- LTAP (Lake Transactional/Analytical Processing): 트랜잭션 DB와 분석을 통합한 신규 아키텍처. 하나의 데이터로 운영과 분석 작업을 동시에 처리. CDC 파이프라인, ETL, 복제 DB 불필요.
- Lakehouse//RT: 신형 실행 엔진 레이든 기반의 실시간 분석 엔진. 소규모 작업 10ms, 대규모 작업 100ms 이하 응답 속도.
비고
- 2026년 6월 데이터+AI 서밋에서 LTAP 아키텍처와 Lakehouse//RT를 공개. AI 에이전트 시대에 데이터 스택 병목을 해결하는 것을 목표로 함.