[미리디] 데이터 엔지니어

담당업무

• Kafka/Debezium 기반 실시간 데이터 수집 파이프라인 구축

• Airflow 기반 배치 데이터 파이프라인 구축 및 운영

• Databricks Delta Lake 기반 Bronze·Silver·Gold 데이터 레이크하우스 설계·운영

• 데이터 모델 및 데이터 웨어하우스 환경 구축

• EKS 기반 Airflow 배치 워크로드와 사내 데이터 활용 오픈소스 솔루션 운영

• 정합성·freshness·schema drift 지표화 및 데이터 품질 모니터링

• Unity Catalog 기반 접근 제어, PII 마스킹, 메타데이터·lineage 관리

• 데이터 제공·셀프서비스 환경 및 운영 자동화 Agent 개발

• AI Agent의 데이터 활용을 지원하는 DW 환경 구축 및 전사 AX 데이터 지원

자격요건

• Python, SQL 기반 데이터 처리 및 운영 가능한 코드 작성 역량

• Spark 등 분산 처리 프레임워크와 DBMS·데이터 스토리지 이해

• AWS 클라우드 환경 데이터 인프라 구축·운영 경험

• Kubernetes 기반 데이터 파이프라인 구축·운영 경험

• 데이터 웨어하우스·레이크하우스 모델링 이해

• AI 도구와 Agent를 활용한 데이터플랫폼 운영·자동화 및 업무 생산성 향상 경험

우대사항

• 원활한 커뮤니케이션과 적극적인 협업 역량

• Databricks·Delta Lake 및 Open Table Format 기반 데이터 레이크하우스 설계·운영 경험

• 접근 제어, PII 처리, 메타데이터·lineage 등 데이터 거버넌스 운영 경험

• ClickHouse·StarRocks 등 DW/OLAP 엔진 또는 분석 서빙 레이어 구축·운영 경험

• 데이터 제공 플랫폼·서비스 구현을 위한 백엔드 개발 경험

• 새로운 기술 스택을 빠르게 학습하고 문제에 맞게 적용하는 역량

마감기한

2026년 8월 31일 23:59까지