인기 검색

Senior Data System Engineer
공고 요약
주요업무
대규모 데이터 파이프라인 설계·운영 및 실시간·배치 ETL/ELT 구현
Apache Airflow 기반 워크플로 자동화·관리
ClickHouse 등 데이터베이스 환경 구축·운영 및 데이터 품질 모니터링 자동화
Databricks Lakehouse 기반 데이터 웨어하우스·플랫폼 구축·운영
Databricks 워크스페이스, 클러스터, Unity Catalog 관리·최적화
Databricks 환경의 데이터 거버넌스·보안 체계 수립·이행
Apache Superset 등 시각화 도구 연동 및 서비스·분석팀의 데이터 활용 지원
Data & AI Engineer 팀을 위한 Feature Store 제공
자격요건
Apache Airflow를 이용한 데이터 워크플로 오케스트레이션 경험
Python 또는 Scala를 활용한 대규모 데이터 처리 개발 능력
AWS, GCP, Azure 중 하나 이상의 클라우드 환경에서 Cloud Native 데이터 인프라 구축 경험
우대사항
영어 능통자
보상 및 지원
연봉 상위 2~5% 표기
지원자와 추천인에게 각각 현금 50만원 합격 보상
자기계발 지원
장비 지원
건강검진 지원
마감기한
상시채용
유모스원 지원하기 전 이력서 Check
시간이 없다면 AI와 한번에 수정해보세요
공고 원문
소개
유모스원(UMOS ONE)은 현대자동차그룹 포티투닷의 자회사로, 데이터와 인공지능(AI) 기술을 기반으로 물류·모빌리티 서비스를 제공합니다. '하나의 연결로, 사람과 화물의 새로운 이동을 만든다'는 목표 아래 통합 서비스 브랜드 '잇’을 운영하며, 현장에 흩어진 데이터와 운영을 연결하고 있습니다. 유모스원은 AI 운송 플랫폼 '잇트럭', 지능형 창고 관리 솔루션 '잇스탁', 기업 셔틀 서비스 '잇셔틀', 통합 관제 솔루션 '잇플릿'을 통해 물류·모빌리티 운영의 효율성을 높이는 데 주력합니다. 현장의 운영 데이터와 AI 기술을 활용해 서비스를 개선하고, 스스로 판단하고 움직이는 자율 운영 환경을 만들어가고자 합니다. 빠르게 변화하는 시장 속에서 복잡한 문제를 날카롭게 분석하고, 더 나은 해법을 빠르게 실행할 동료를 찾고 있습니다. 함께 더 멀리 나아가고 서로의 성장을 진심으로 응원하는 팀에서 의미 있는 도전을 이어가고 싶다면, 유모스원에서 그 여정을 함께하세요.
주요업무
• 대규모 데이터 파이프라인 설계 및 운영 • UMOS 플랫폼에서 발생하는 대용량 Mobility 및 Logistics 데이터를 수집, 정제, 변환하기 위한 실시간 및 배치 파이프라인 (ETL/ELT) 설계 및 구현 • Apache Airflow를 활용하여 복잡한 데이터 파이프라인 워크플로우를 자동화 및 관리 • 고성능 분석 및 시계열 데이터 처리를 위해 ClickHouse 등 특화된 데이터베이스 환경 구축 및 운영 • 데이터 정합성을 확보하고 데이터 품질 이슈를 해결하기 위한 자동화된 모니터링 시스템 구축 • 데이터 웨어하우징 및 플랫폼 구축 (Databricks Lakehouse) • Databricks Lakehouse Platform을 주요 데이터 웨어하우스(Data Warehousing) 목적으로 설계, 구축 및 운영 • Databricks 워크스페이스, 컴퓨팅 자원 (Cluster), Unity Catalog 등을 관리하고 최적화하여 플랫폼 안정성 및 효율성 극대화 • Databricks 환경 내에서 데이터 거버넌스 및 보안 체계 수립 및 이행 • 데이터 서비스 및 분석 환경 제공 • 서비스 및 분석 팀이 신속하게 데이터를 탐색하고 활용할 수 있도록 Apache Superset 등 시각화 도구를 연동하고 운영 지원 • Data & AI Engineer 팀이 지식 그래프(Knowledge Graph) 및 AI 모델을 개발할 수 있도록Databricks 환경에서 필요한 Feature Store를 제공
자격요건
• 8년 이상의 데이터 플랫폼 구축 및 파이프라인 개발 경력 • Apache Airflow를 이용한 데이터 워크플로우 오케스트레이션 경험 • Python 또는 Scala를 활용한 대규모 데이터 처리 개발 능력 • 클라우드 환경 (AWS, GCP, Azure 중 1개 이상) 기반의 Cloud Native 데이터 인프라 구축 경험
우대사항
• Databricks Lakehouse Platform (Spark, Delta Lake 포함)을 활용한 실무 개발 및 운영 경험 • ClickHouse 등 컬럼 기반 분석 데이터베이스 구축 및 운영 경험 • Apache Superset 등 데이터 시각화 및 BI 툴 연동 및 운영 경험 • 스트림 처리 기술 (Kafka, Flink)과 Databricks Structured Streaming 연동 경험 • MLOps 환경 구축 경험 및 머신러닝 워크로드 지원 경험 • Kubernetes, Docker 환경 이해 및 활용 경험
혜택 및 복지
• 복지카드 • 식비 지원 • 단체 상해보험 • 건강검진 • 경조사지원 • 최신형 업무기기 지원 • 라운지 간식 및 음료 제공
댓글
유모스원에 맞는
이력서로 자동 수정하기