Data Platform Engineer(Backend)

소개

크라우드웍스는 국내 ​인공지능 데이터 산업을 주도하는 ​IT ​기업으로서 지난 ​2023년 8월 31일, ​설립 6년만에 ​국내 ​AI 스타트업 ​중 ​최초로 ​한국거래소 코스닥 시장에 ​상장하였습니다. ​크라우드웍스는 네이버, 삼성전자, ​크래프톤을 ​포함한 ​약 430여개의 고객사들에게 ​인공지능 모델 ​개발에 ​필요한 형태의 ​AI Data를 ​공급한 ​경험이 있으며, 약 ​2억개 이상의 ​누적데이터와 1천 건 이상의 프로젝트 운영 경험을 바탕으로 각 수요기업에게 적합한 맞춤형 A to Z 서비스까지 제공하고 있습니다. 또한, 기업 고객뿐만 아니라 원하는 시간과 장소에서, 원하는 만큼 일하며 소득을 창출하고 싶어하는 50만명 이상의 크라우드웍스 회원에게는 꾸준한 일자리와 함께 다양한 인공지능 데이터 작업에 참여할 수 있는 기회를 제공함으로써 기업의 사회적 책임도 다하고자 하고 있습니다. 전세계적으로 확대되고 있는 인공지능 기술에 대한 관심과 데이터의 수요에 맞게 크라우드웍스 역시 기존의 인공지능 데이터 비즈니스 뿐만 아니라 AI 기술 개발 가치사슬 전 단계를 제공하는 통합 데이터 솔루션 회사로 나아가고자 노력하고 있으며, 이를 통해 궁극적으로 사람과 인공지능이 함께 성장하는 새로운 미래를 만들어가고자 합니다. 저희와 함께 다양한 산업의 데이터를 구조화하고, 이를 AI가 이해하고 활용할 수 있는 지식 체계로 만들어갈 동료를 기다리고 있습니다.

주요업무

• Java / Spring Boot 기반 데이터 플랫폼 백엔드 서비스 설계 및 개발 • 데이터 수집, 파싱, 청킹, 임베딩, 인덱싱으로 이어지는 End-to-End 데이터 파이프라인 설계 및 구현 • 대량 데이터 처리를 위한 비동기·분산 작업 구조 및 워크플로우 설계 • 데이터 처리 상태, 이력, 리니지 및 재처리 구조 설계 • OpenSearch 등 검색·Vector Search 시스템과의 연계 구조 설계 및 개발 • 장애 복구, 재시도, 중복 처리 방지 등 안정적인 데이터 처리 구조 설계 • 시스템의 성능, 확장성, 운영 안정성을 지속적으로 분석하고 개선 • 데이터 플랫폼의 기술적 문제를 정의하고 새로운 기술의 적용 가능성을 검토

자격요건

• 7년 이상의 백엔드 또는 데이터 플랫폼 개발 경험이 있으신 분 • Java / Spring Boot 기반 서비스를 설계하고 운영해본 경험이 있으신 분 • REST API 및 데이터 중심 백엔드 시스템을 설계·개발한 경험이 있으신 분 • RDBMS 기반 데이터 모델링 및 트랜잭션 처리에 대한 이해가 있으신 분 • 비동기 처리, 배치 또는 대량 데이터 처리 시스템을 설계하거나 운영한 경험이 있으신 분 • 장애나 성능 문제의 원인을 분석하고 구조적인 개선으로 연결할 수 있으신 분 • 기술적 의사결정의 근거와 트레이드오프를 논의하고 문서화할 수 있으신 분

우대사항

• LLM 기반 서비스 또는 RAG 아키텍처에 대한 이해 또는 개발 경험이 있으신 분 • Embedding 및 Vector Search를 활용한 검색 시스템 개발 경험이 있으신 분 • Elasticsearch / OpenSearch 기반 검색 시스템 설계 및 운영 경험이 있으신 분 • 검색 품질 개선, Ranking 또는 Retrieval 최적화 경험이 있으신 분 • 문서 처리, OCR, Parsing, Chunking 등 비정형 데이터 처리 경험이 있으신 분 • RabbitMQ, Kafka 등 메시징 시스템을 활용한 비동기·분산 처리 경험이 있으신 분 • Docker, Kubernetes 기반 환경에서 서비스를 구축하고 운영한 경험이 있으신 분 • 대규모 데이터 처리 시스템의 성능 튜닝 및 장애 대응 경험이 있으신 분 • 새로운 기술이나 오픈소스를 검증하고 실제 제품에 적용해본 경험이 있으신 분

혜택 및 복지

• 크라우드웍스 구성원의 몰입과 성장을 위한 쾌적한 근무 환경 • 사내카페(바리스타 상주) 및 라운지 무료 운영 • 웰컴 키트 등 사무 편의용품 지원 • 직무 역량 강화를 위한 세미나/컨퍼런스, 강의 등록, 도서 구매 등 지원 • 2시간 단위의 자유로운 연차 사용 • 저금리 사내 대출 제도 • 복지성 적금/연금 제도 • 2년 단위 장기근속 포상 • 생일 축하금 지원 • 임직원 건강검진 지원 • 연간 한도 내 의료비 지원 • 기타 기본 복지(4대 보험 및 경조금 등) 지원