Databricks

Databricks란 apache spark를 만든 사람들이 모여 만든 플랫폼 Delta Lake, mlflow 등을 이용해 통합 클라우드 분석 플랫폼을 제공하는 Saas 회사 이것을 LakeHouse라고 부른다. 해결하려고 한 것 사일로화된 기술 스택으로 복잡해진

추가 설정 없이 클라우드 스토리지에 도착하는 새로운 데이터 파일을 점진적으로 효율적으로 처리한다.여러 cloud 회사의 데이터 스토리지에서 읽어온다.cloudFiles 라고 불리는 구조화된 Streaming source를 제공한다.cloud file storage pa