데이터 엔지니어(5년 이상)

주요업무

데이터 품질 및 보안 전략을 수립하고, 정확성과 무결성을 유지하기 위한 프로세스 구현 다양한 부서와 협업하여 비즈니스 요구를 데이터 아키텍처 및 파이프라인에 반영 대규모 데이터 파이프라인 및 ELT 프로세스를 설계, 구축, 운영하여 신뢰도 높은 데이터를 제공 빅데이터 환경(Spark, Airflow, Kafka 등) 및 클라우드 플랫폼(AWS, GCP)을 활용한 인프라 설계와 최적화 데이터 디스커버리 서비스(Datahub) 운영 및 관리 배치 처리 시스템을 운영 및 고도화 하고, 차세대 실시간 스트리밍 처리 시스템 설계 데이터 레이크 환경을 효율적으로 운영하고 분석 및 머신 러닝 팀의 요구 사항을 충족 주니어 데이터 엔지니어 멘토링 및 기술 리더십 제공

자격요건

컴퓨터 공학, 전기공학, 수학, 데이터 과학 등 관련 전공 학사 이상 5년 이상의 데이터 엔지니어링 경험(대규모 데이터 파이프라인 및 클라우드 인프라 운영 경험 포함) SQL 및 NoSQL 데이터베이스(PostgreSQL, MySQL, MongoDB, Cassandra 등)에 대한 깊은 이해 Spark, Airflow, Kafka 등의 빅데이터 처리 프레임워크 활용 경험 Scala, Python 중 한 가지 이상의 언어를 능숙하게 사용할 수 있는 역량 보유 데이터 품질 관리 및 보안에 대한 실무 경험 문제 해결 능력 및 효율적인 커뮤니케이션 스킬 스타트업 문화에 대한 이해와 팀 협업 역량

우대사항

LLM, RAG 관련 어플리케이션 개발 및 파이프라인 구축 경험 레이크 하우스, 데이터 레이크, 데이터 웨어하우스 설계 및 운영 (Data Vault, Delta Lake, BigQuery 등) 경험 실시간 스트리밍 데이터 구축 및 스트리밍 시스템(on Kubernetes) 운영 경험 대규모 트래픽을 처리하는 분산 환경 운영 경험 데이터 시각화 도구(Looker, Power BI 등) 사용 경험 빠르게 변화하는 환경에서도 유연하게 대처할 수 있는 능력

기술스택

Python, Scala, MongoDB, MySQL, PostgreSQL, Airflow, Kafka, Spark, NoSQL, SQL

채용절차

서류전형→ 1차 면접→ 처우 협의 및 입사일 조정 입사 지원 서류: 이력서/자기소개서, Notion 등 포트폴리오, 경력 기술서 고용형태: 정규직