[독파모] AI Research Engineer - LLM Eval

담당업무

• LLM 지식·추론 능력, 인간 선호도 정렬, Agent 활용 시나리오 성능 분석·평가

• 글로벌 프론티어 LLM 벤치마크 동향 분석 및 Solar 평가 체계 구축

• 다국어 평가 데이터의 언어 편향성, 문화·언어 이해도, 인간 선호도 측정 방식 연구

• 평가 플랫폼 및 인프라 설계·고도화

• 평가·분석 자동화, 분산 환경 평가 파이프라인 구축, 결과 수집·분석 시스템 개선

대표 프로젝트

• Automatic quality assessment system development

• Agent evaluation framework development

• Solar safety benchmark development

• Solar edge-case benchmark development

• Complex structured text generation benchmark development

• 기술 흐름과 상황에 따라 LLM 모델 발전에 영향력 있는 기술 요소 중심으로 프로젝트 변경

자격요건

• AI 모델 평가·분석 관련 국제 학회 출판 기록 또는 ML·NLP 관련 국제 학회 1저자·교신저자 출판 기록

• AI 모델 평가용 데이터 수집·생성·정제 경험

• Agentic flow 및 tool use 설계·개발 경험

• Failure analysis 기반 데이터 분석과 인사이트 도출 역량

• 가설·검증 방식의 실험 설계 및 결과 도출 역량

• 복잡한 데이터 협업 프로토콜 정리와 시스템적 사고 능력

• 레슨런을 효과적으로 전파하고 논의하는 의사소통 능력

전형절차

1. 서류 전형

2. 알고리즘 코딩 테스트

3. 딥러닝 코딩테스트

4. 기술 인터뷰 1차·2차

5. 컬처 인터뷰

6. 최종 인터뷰

7. 최종 결과 발표

8. 최종 인터뷰 후 레퍼런스 체크 진행 가능

근무환경

• 원격 근무

• 원격 근무 장비 500만원 예산 내 선택

• 근무 카페 음료 비용 지원

• 스터디룸 및 공유오피스 이용 비용 지원

• 업무 관련 소프트웨어·도서·자료·교육·어학 수강비 지원

• 운동비 지원

• 직장 단체보험 및 종합건강검진 지원

마감기한

상시채용