Data Engineer

주요업무

Data Engineer는 팀원들과 함께 제품 개발을 위해 기술 방향과 개발 우선순위를 설정하여 혁신적인 소프트웨어 어플리케이션을 제작합니다. 회사 정책에 따라 입사시 공식 직무 이름은 Software Engineer가 됩니다. [이런 일을 합니다] 1. Data Engineer는 ProtoPie에서 데이터를 활용하기 위한 모든 기술을 담당합니다. • 프로토파이에서 대량의 데이터를 효율적으로 처리하기 위한 다양한 데이터 기술을 담당 • 다양한 Data Source 로 부터 수집된, Raw Data 를 Modeling 과정을 거쳐, 분류 및 최적화 • 안정적이고 효율적인 데이터 분석 및 Visualization 을 위한 도구 개발 및 운영 2. 최적의 데이터 파이프라인을 만들고 유지합니다. • 다양한 데이터 소스 (DB, Amplitude, Salesforce, Learning Platform, etc)에서 데이터를 최적으로 추출, 변환하는 데 필요한 확장 가능한 데이터 파이프라인 개발 • 데이터 파이프라인을 위한 인프라 및 모니터링 환경 구축 • Open API를 개발하여 다양한 곳에서 데이터를 사용할 수 있도록 지원

자격요건

• 컴퓨터공학 또는 관련 분야의 학사 또는 석사 학위를 취득하신 분 • 데이터 엔지니어로서 2년 이상의 경험을 보유하신 분 • 데이터베이스 스키마 설계 경험 • BI 를 위한 advanced 한 data query 경험 (ex. 제품의 usage data, 회사 매출 metric data) • 대용량 데이터 처리를 위한 데이터 파이프라인(수집/처리/분석) 아키텍처 설계 및 개발 경험 • (DBT 를 이용한) data Modeling 경험 • Python 개발 경험 • 팀 환경에서 잘 일할 수 있으신 분 • 뛰어난 문제 해결 능력을 보유하신 분

우대사항

• Data Lake Platform (Hudi, Iceberg, Deltalake 등)에 대한 활용 경험 • 빅데이터 툴 경험 (Hadoop, Spark, Kafka 등) • Postgres 또는 HBASE, Apache Cassandra 등을 포함한 관계형 SQL 및 NoSQL 데이터베이스 경험 • DBT - data modeling, Lightdash - data visualization, Redshift - data warehouse 등의 사용 경험 • SW Engineer 로서 Java, Typescript, Java Script 등의 개발 언어 경험 • 일반적인 방법으로 처리하기 힘든 대규모 데이터셋이나 비정형 데이터를 다루어 본 경험 • 복잡한 데이터 파이프라인을 잘 관리하기 위해 자동화나 모니터링 환경을 구성한 경험 • 데이터 기반 서비스 개발 경험 • 새로운 기술이나 시도를 실제 서비스에 적용하여 제품을 개선한 경험 • 영어로 커뮤니케이션 할 수 있으신 분 (비즈니스 레벨) • 통계 프로그래밍에 대한 경험이 풍부하신 분

기술스택

Java, Apache, PostgreSQL, Kafka, Spark, Salesforce, Amplitude, Redshift Renderer

채용절차

[Hiring Process] • 서류 전형 ＞ 1st Interview(Live SQL quiz / 대면인터뷰) ＞ Reference check (Specter) ＞ 2nd Interview(화상인터뷰)＞ 입사 • 지원시 직무와 무관한 신체적 조건, 혼인여부, 가족관계, 출신지역 등의 개인정보는 이력서에서 제외해주시기 바랍니다. • 지원일로부터 14일내 서류전형에 대한 결과를 안내드립니다. • 채용 포지션에 따라 인터뷰 전형은 일부 변동이 있을 수 있습니다. • 레주메 및 포트폴리오에 허위사실이 있을 경우, 합격이 취소됩니다.