Principal Applied Scientist

담당업무

• AI 기반 제품 영역의 적용과학 전략 수립 및 실험·출시·지속 개선 주도

• AI 제품 경험의 고객 가치, 품질 기준, 신뢰성, 안전성, 참여도 및 비즈니스 영향 정의

• 제품 개발 전 과정의 LLM 평가 프레임워크 설계 및 운영

• LLM, 에이전트, 검색증강, 멀티모달 AI 시스템의 평가 방법론 개발

• 모델·프롬프트·시스템 설계·검색 전략·그라운딩 품질·도구 사용·제품 동작을 비교하는 오프라인 실험 및 평가 파이프라인 구축

• 제품 전략·로드맵·고객 요구·실행 계획에 맞춘 과학 우선순위 조율

• 신뢰성, 확장성, 지연시간, 관측성, 유지보수성 및 MLOps를 고려한 AI 시스템 생산화

• 가설 수립, 지표 정의, 실험, 결과 해석 및 제품·기술 개선안 제시

• AI 출시를 위한 평가 점수표, 회귀 테스트, 가드레일 지표 및 책임 있는 AI 의사결정 체계 수립

• 과학자와 엔지니어 멘토링 및 AI 개발·실험·평가 관련 모범 사례 확산

• 기술·비기술 이해관계자에게 결과, 트레이드오프, 위험 및 권고사항 전달

필요 역량

• 통계, 예측 분석 또는 연구 경험

• LLM 기반 제품의 프롬프트 엔지니어링, RAG, 에이전트, 도구 사용, 모델 비교 및 실패 분석 경험

• LLM 평가를 위한 데이터셋 생성, 주석 전략, 자동·인간 평가, 벤치마크 설계, 회귀 테스트 및 프로덕션 모니터링 이해

• 오프라인 실험 설계 및 결과 해석 역량

• 텍스트, 이미지, 문서, 오디오, 비디오 등 멀티모달 AI 시스템 평가 경험

• 제품 성공 지표를 고객·비즈니스 목표와 측정 가능한 과학·기술 목표로 전환하는 역량

• 프로덕션 품질 AI 시스템 구축을 위한 소프트웨어 엔지니어링 역량

• MLOps, 실험 인프라, 텔레메트리, 모니터링, 데이터 파이프라인 및 지속 개선 루프 경험

• PM 및 엔지니어링 리더십과 협업하여 제품 방향과 실행을 이끄는 역량

• 우수한 커뮤니케이션, 협업 및 기술 리더십

우대사항

• AI/ML 기반 제품 또는 서비스 구축·평가·출시 경험

• 에이전트 워크플로, 엔터프라이즈 AI, 생산성 도구, 개발자 도구 또는 고객 대상 AI 제품 경험

• 책임 있는 AI, 안전성 평가, 레드팀, 환각 측정, 그라운딩 품질, 편향·공정성, 개인정보 또는 컴플라이언스 관련 평가 경험

• 재사용 가능한 평가 플랫폼, 실험 프레임워크, 모델 점수표 또는 AI 품질 대시보드 구축 경험

• 오프라인 평가, 온라인 실험, 텔레메트리 및 고객 피드백을 통합한 제품 의사결정 프레임워크 경험

• 학술 논문, 특허, 오픈소스 기여 또는 AI/ML 분야의 기술 리더십

보상

• 미국 기본 연봉 USD $142,800~$274,800

• 샌프란시스코 베이 지역 및 뉴욕시 대도시권 기본 연봉 USD $188,000~$304,200

• 일부 직무의 복리후생 및 기타 보상 대상 가능

근무환경

• 성장 마인드셋 기반의 협업 문화

• 존중, 진실성 및 책임감 중시

• 포용적 근무 문화

마감기한

채용시 마감