S2W Data Platform Engineer 채용

부서 소개

사내 데이터를 통합하고 사람과 AI 모두가 데이터에 자유롭게 접근 및 활용할 수 있는 플랫폼을 설계, 구축, 운영하며 데이터 전 생애주기를 담당합니다.

주요 업무

• 다양한 출처의 정형 및 비정형 데이터 수집 및 적재 파이프라인 설계 및 운영

• 사람과 AI 에이전트의 데이터 접근성을 극대화하는 AI 친화적 데이터 플랫폼 구축

• 대용량 데이터 처리 성능 분석 및 비용 최적화

• 데이터 처리 이상 및 병목 실시간 감지 관측 체계 구축 및 운영

• LLM 서비스 및 AI 워크플로우 연동 자동화 구조 설계

필수 역량

• 오픈 테이블 포맷 기반 레이크하우스 아키텍처 이해 및 설계 역량

• Python, Scala, Java 등 언어 무관 견고한 파이프라인 설계 및 개발 경험

• Apache Spark, Flink 활용 대용량 데이터 배치 및 스트림 처리 경험

• Apache Kafka, Kinesis 활용 실시간 데이터 스트리밍 파이프라인 구축 경험

• Apache Airflow, Prefect 활용 파이프라인 스케줄링 및 관리 경험

• Kubernetes, Docker 기반 서비스 배포 및 운영 경험

우대 사항

• 대규모 데이터 레이크하우스 구축 및 운영 경험

• SQL 기반 데이터 모델링 및 분석 경험

• DataHub, OpenMetadata 활용 데이터 카탈로그 플랫폼 구축 경험

• LLMOps 파이프라인 또는 AI 서비스 플랫폼 구축 경험

• 클라우드 환경 데이터 인프라 운영 및 비용 거버넌스 최적화 경험

기술 스택 및 협업 툴

• 데이터 수집 및 스트리밍: Apache Kafka, Apache Flink, Kinesis

• 데이터 처리: Apache Spark

• 데이터 저장 및 포맷: Apache Iceberg, Delta Lake

• 워크플로우 오케스트레이션: Apache Airflow, Prefect

• 컨테이너 및 인프라: Kubernetes, Docker

• 메타데이터 관리: DataHub, OpenMetadata

복리후생 및 업무 환경

• 완전 자율출근제 및 재택근무 선택 가능

• 업무용 장비 지원 및 3년 주기 교체

• 업무 관련 교육 및 도서 구매비 지원

• 점심 및 저녁 식사, 간식, 커피 지원

• 연간 240만 원 자기개발비 지원

• 1:1 영어 회화 프로그램 지원

• 매년 종합 건강검진 지원

• 무이자 사내 대출 지원

• 내일채움공제 가입 지원

채용 절차

1. 서류 전형

2. 직무 인터뷰

3. 컬처 핏 인터뷰

4. 처우 협의 및 입사

마감기한

채용시 마감