Data Engineer1 [Databricks] 개념 및 사용 방법 Databricks스파크를 만든 엔지니어들이 설립한회사아파치 스파크 실행환경 제공해주는 클라우드 기반 플랫폼스파크 소스를 테스트 할 수 있는 웹 UI 환경 제공. 설치작업 없이 테스트 가능Spark, Dleta Lake, MLFlow, Koalas까지 데이터 환경 오픈소스 만듦Lakehouse Platform 서비스 제공 주요기능데이터 처리 예약 및 관리, 특히 ETL대시보드 및 시각화 생성보안, 거버넌스, 고가용성 및 재해 복구 관리데이터 검색, 주석 및 탐색ML(기계 학습) 모델링, 추적 및 모델 서비스생성 AI 솔루션요금Databricks Unit(DBU): 사용되는 처리 능력의 정규 단위 (시간당 처리 단위. 초당 사용량 증가분에 따라 청구됨)전기요금 지불처럼 소비한 에너지 양에 대한 비용 지불S.. 2024. 7. 15. 이전 1 다음
