Data Engineer, Korea

소개

Data&AI Team은 ​현재 카운터포인트가 제공하고 있는 ​전자제품 ​판매량 추정자료와 ​예측자료를 대용량 데이터를 ​활용하여 고도화하는 ​활동을 ​하게 됩니다. ​정확한 ​추정과 ​예측을 위해 대용량 ​데이터를 ​탐색, 측정, 평가하여 ​빅데이터 ​기반 ​기술을 통해 모델을 ​생성 및 ​튜닝함으로써, ​예측값을 개발하는 ​역할을 합니다.

주요업무

다양한 ​소스의 ​데이터를 효율적으로 수집할 ​수 있는 ​확장성 있는 배치 및 실시간 데이터 파이프라인을 구축. 데이터 거버넌스 시스템을 구축하고, 정책을 정의하여 운영. 모든 서비스와 프로세스에서 생성되는 기술 및 비지니스 메타데이터를 중앙화하고, 제공하는 환경을 구축. 신뢰도 높은 데이터 인프라와 데이터 품질을 보장하기 위한 검증도구들을 개발. 데이터 기반의 고객 가치 향상을 위한 데이터 기반 서비스를 설계하고 개발.

자격요건

데이터엔지니어 경력 2년 이상의 유관 경력 혹은 이에 준하는 역량을 갖추고 계신 분 자료구조, 알고리즘, OS, 네트워크, 데이터 베이스 등 기본적인 CS 지식에 대한 이해를 갖고 계신 분 Python, SQL을 적극 활용 가능하며, 다양한 형태의 데이터를 다룰 수 있는 역량과 경험을 갖추신 분 데이터 파이프라인과 데이터 레이크 구축, 운영 경험이 있으신 분 AWS 클라우드를 활용한 데이터 플랫폼 인프라 구성에 대한 경험을 갖추신 분 데이터 모델링 경험이 있으며, 데이터 마트 생성 및 대시보드 구성 경험이 있으신 분 주요 활용 기술 스택 : AWS Glue, EMR, Athena, DMS, MSK, Python, SQL, Java, Apache Airflow, Apache Spark, Databricks, Datahub

우대사항

Java, Scala, Rust 중 1개 언어에 대한 개발 역량을 갖고 계신 분 HDFS 기반 스토리지 기술(Delta Lake, Ice berg)과 다양한 DBMS(PostgreSQL, Oracle, MongoDB, BigQuery, Clickhouse 등)에 대한 지식과 경험을 갖고 계신 분 Kubernetes 클러스터 운영과 관련 Eco System에 대한 구축 및 활용 경험이 있으신분 데이터 모델링과 데이터 표준화에 대한 경험이 있고, 데이터 거버넌스 운영 경험이 있으신 분 Databricks 구축하거나, 데이터 분석과 처리 및 거버넌스에 적극 활용 경험이 있으신 분 데이터 관련 도구와 기술에 대해서 적극적으로 학습하고 도입하는데 적극적이신 분

혜택 및 복지

자기계발비 연간 120만원 지원 디지털 기기 지원 (아이폰, 애플워치 등 디지털 기기 구매 비용 지원) 연차휴가 외 유급 하계휴가, 장기근속자 Refresh 휴가 무제한 간식 제공 (간식, 음료, 커피 머신 상시 비치) 생일 축하금 지급 (좋은 날은 함께! 생일 파티 및 생일 상품권 지급) 업무 관련 각종 온/오프라인 교육 지원 각종 도서비 지원 (연 50만원 도서비 및 장려금 지원) 사내 컨테스트 진행 (다양한 사내 컨테스트를 통한 상품권 등 각종 경품 지급) 개인별 오피스 기기 (노트북 등 개인별 주변 기기 지원) 건강검진 제공 매년 글로벌 팀과 해외 워크샵 : 쿠알라룸푸르, 두바이, 홍콩, 코사무이, 뭄바이, 바르셀로나, 발리, 푸꾸옥 등