Azure Databricks 기반 전사 데이터 플랫폼 아키텍처 설계 및 구축 · 위시켓(Wishket) - 프로젝트
업무 내용
프로젝트 소개- Azure Databricks 기반 데이터 플랫폼의 아키텍처를 설계하고 구축하며, 전사 데이터 파이프라인의 표준화와 운영 안정성을 책임지는 포지션입니다.- 데이터 거버넌스부터 CI/CD 배포까지 데이터 플랫폼 전 영역을 아우르는 기술 아키텍트 역할입니다.전체 시스템 구성- Azure Databricks, ADLS, ADF, Spark, Delta Lake, Unity Catalog