Data Engineer (Platform)

소개

[합류하게 될 팀에 대해 알려드려요] • 토스뱅크의 Data Engineer(Platform)은 Data Division 내 Data Platform 팀에 속해 있어요. • Data Platform 팀은 Hadoop(Infrastructure), Airflow(Workflow), Trino/Impala(Query Engine) 등 핵심 데이터 플랫폼을 운영하며 전사 데이터의 신뢰성과 확장성을 책임져요. • 앞으로는 온프레미스 오픈소스 환경과 AWS·GCP 클라우드가 결합된 하이브리드형 데이터 플랫폼으로의 전환을 진행하고 있어요. 클라우드 네이티브 기술을 적극 도입해 플랫폼의 확장성과 유연성을 한 단계 높이는 여정을 함께할 분을 찾고 있어요. • 분산 쿼리 엔진을 통해 대규모 데이터를 누구나 빠르고 안정적으로 조회할 수 있는 환경을 만들고, Tableau 기반 BI 플랫폼으로 데이터 기반의 의사결정을 지원해요. • 단순 운영을 넘어, 플랫폼의 리소스를 최적화하고 엔지니어와 분석가의 개발자 경험을 개선하는 것이 팀의 주요 미션이에요.

주요업무

[합류하면 함께할 업무예요] • Hadoop 기반 대규모 데이터 인프라와 Kubernetes 환경의 Airflow 플랫폼을 설계하고 고도화하며, 전사 파이프라인의 안정성을 책임져요. • 온프레미스와 클라우드(AWS·GCP)가 공존하는 하이브리드 데이터 플랫폼 아키텍처를 설계하고, EKS·GKE, S3·GCS, EMR·Dataproc·BigQuery 등 클라우드 서비스 기반으로 워크로드의 클라우드 전환을 주도해요. • Trino, Impala, Spark SQL 등 분산 쿼리 엔진을 운영하며 성능 병목을 분석하고 튜닝하여 데이터 조회 환경을 개선해요. • 플랫폼 운영 효율을 위해 성능 장애 및 확장성 이슈를 분석하고, 코드 기반의 운영 자동화 방안을 주도적으로 설계하고 구현해요. • 전사 데이터 엔지니어·분석가와 협업하여 누구나 쉽고 안전하게 데이터를 활용할 수 있는 플랫폼 환경과 시스템을 고도화해요. • 새로운 기술과 오픈소스를 검토하고 도입해 데이터 플랫폼의 성능과 확장성을 지속적으로 높여요.

자격요건

[이런 분과 함께하고 싶어요] • Hadoop, Spark 등 분산 처리 시스템에 대한 깊은 이해가 있고, 이를 실무에 적용해 클러스터를 운영해 본 경험이 있는 분이 필요해요. • AWS 또는 GCP 클라우드 환경에서 Kubernetes(EKS·GKE)를 운영했거나, EMR·Dataproc·BigQuery·S3/GCS 등 클라우드 기반 데이터 플랫폼을 구축·운영해 본 경험이 있는 분이 필요해요. • Trino(또는 Impala) 등 분산 쿼리 엔진의 운영과 성능 튜닝, 장애 대응을 경험해 본 분이 필요해요. • Airflow 기반의 워크플로우 시스템을 운영하며 안정성과 실행 효율을 개선해 본 경험이 있는 분이 필요해요. • Python 또는 Java/Scala 기반의 개발 역량을 갖추고, Docker/Kubernetes 환경에서의 서비스 배포 및 운영 이해도가 높은 분이 필요해요. • 오픈소스를 코드 레벨에서 분석하거나 수정하여 문제를 해결하는 데 거부감이 없고, 동료의 생산성을 높이는 플랫폼 환경 개선에 관심이 있는 분이면 좋아요. • 다양한 팀과 원활하게 커뮤니케이션하며, 금융권의 보안 및 안정성 기준을 이해하고 시스템에 녹여낼 수 있는 분이 필요해요.

우대사항

[이력서는 이렇게 작성하시는 걸 추천해요] • Hadoop, Airflow, Trino, BI/EDA 등 주요 스택을 활용해 플랫폼의 안정성·성능·운영 효율을 개선한 구체적인 사례, 혹은 운영 과정에서 발견한 장애·병목·운영 비효율을 어떤 가설과 진단 과정을 거쳐 해결했는지 적어주세요. • AWS·GCP 환경에서 Kubernetes 혹은 데이터 플랫폼을 구축·운영한 경험이 있다면, 어떤 서비스(EKS·GKE, EMR·Dataproc·BigQuery 등)를 어떤 규모로 운영했고 아키텍처 설계·비용·안정성 측면에서 어떤 의사결정을 했는지 구체적으로 적어주세요. 온프레미스클라우드 마이그레이션 경험이 있다면 전환 전략과 결과를 함께 담아주세요. • 분산 쿼리 엔진 튜닝이나 워크플로우 최적화 등 데이터 소비자(엔지니어/분석가)의 경험을 개선한 성과를 중심으로 작성해 주세요. • 실제 서비스 환경에서 발생한 문제(장애, 병목 등)를 해결한 과정과 그 결과를 수치나 객관적인 근거로 보여주시면 좋아요. • 단순 구축/운영 경험보다는 기술적 고민을 통해 플랫폼을 어떻게 발전시키고 자동화했는지에 대한 이야기를 담아주세요.

혜택 및 복지

[이렇게 일해요] • 자율과 책임의 문화: 토스는 Manager가 아닌 Maker들로 구성된 조직으로, 투명한 정보 공유와 수평적인 문화 속에서 구성원 업무에 대한 위임과 신뢰를 바탕으로 세상을 변화 시켜 나가고자 합니다. • 효율적인 업무방식: 가장 중요하고, 큰 영향을 미칠 수 있는 일에 집중합니다. 획일적인 업무 프로세스보다는 데이터 기반의 사고로 적극적으로 토론하며, 가장 효율적인 문제 해결을 위해 협업하고 실행합니다. • 훌륭한 팀과 동료: 각 분야 최고 수준의 역량을 갖춘 인재들이 자율과 책임의 원칙 아래 뛰어난 역량을 발휘하고 있습니다. [이런 지원을 받아요] 1. 자율과 효율의 근무 환경을 제공합니다. • 자율 출퇴근 제도 • 자율 휴가 / 재택근무 • Early Friday & OFF Week 2. 업무와 성장에 몰두할 수 있게끔 지원합니다. • 비포괄임금제 운영 • 업무 관련 비용 100% 지원 • 최고급 장비 및 소프트웨어 제공 • 반기별 성과급 지급 • 매월 통신비 및 체력단련비 지원 • 명절 상여금 및 생일축하비 • 직장단체보험비(가족 포함) 및 경조사비 • 인재추천비 500만원 3. 먹고 마시는 것까지 회사가 책임집니다. • 법인카드 전원 지급 (점심/저녁 식사비용, 야간교통비 등 100% 지원) • 사내카페 커피 Silo 무료 이용 • 사내 편의점, 헤어살롱 등 복지시설 무료 이용