Senior Data Scientist - Outlook Science Team

담당업무

• Outlook Mail, Calendar, Search, Copilot 제품 투자 평가를 위한 분석 프레임워크 설계 및 실행

• 제품 지표, 가치 창출 상호작용, 가드레일, 퍼널, 리텐션 지표 및 기능별 성공 기준 정의

• 온라인 실험, 준실험, 관찰 연구 설계 및 분석을 통한 인과효과 추정과 출시 의사결정 지원

• 제품 상태, 실험 결과, AI 품질, 신뢰성, 지연시간, 감성, 도입률을 모니터링하는 대시보드·시맨틱 모델·리포팅 파이프라인 개발

• 벤치마크 데이터셋, 사람 평가, LLM 평가자, 오류 분석, 운영 텔레메트리를 활용한 생성형 AI·에이전트 경험 평가

• 프롬프트 엔지니어링과 평가 기법을 활용한 응답 품질, 근거성, 관련성, 안전성, 과업 완료율 개선

• 응용 과학자 및 엔지니어와 모델 선택, 기능 개발, 사후 학습 신호, AI 제품 경험 측정 전략 협업

• 대규모 행동 및 텔레메트리 데이터 분석을 통한 고객 니즈, 제품 이슈, 추세 및 기회 발굴

• 시니어 리더에게 실행 가능한 인사이트를 전달하고 모호한 비즈니스 질문을 측정 가능한 분석 계획으로 전환

• 통계적 엄밀성, 재현성, 개인정보 보호 분석 및 운영 우수성 향상을 위한 기술 멘토링

자격요건

• Microsoft, 고객 및 정부 보안 심사 요건 충족

• 구조화·비구조화 데이터 관리, 통계 기법 적용 및 분석 결과 보고 역량

• 제품 지표 정의와 대규모 데이터 기반의 로드맵·투자·출시 의사결정 경험

• 실험 설계 및 통계 방법을 활용한 제품·비즈니스 영향 측정 경험

• SQL과 Python 또는 R을 활용한 분석 및 통계·머신러닝 방법 구현 경험

• 회귀, 분류, 클러스터링, 예측, 인과추론 또는 실험 방법 활용 역량

우대사항

• 생성형 AI, 대규모 언어 모델, 검색 증강 생성, 에이전트 시스템 및 자연어 처리 경험

• 프롬프트 엔지니어링, 벤치마크·평가 기준 설계, LLM 평가, 사람 참여 평가 및 A/B 테스트 경험

• 오프라인 평가, 운영 텔레메트리 분석 및 고객 피드백 기반 AI 제품 성능 개선 경험

• 대규모 분산 데이터 및 재사용 가능한 분석 데이터셋·지표 계층·대시보드 구축 경험

• Azure Data Explorer/Kusto, Azure Data Lake, Synapse, Databricks, Data Factory 또는 Power BI 경험

• 커뮤니케이션, 생산성, 검색, 협업 또는 엔터프라이즈 소프트웨어 제품 분석 경험

• 모호한 부서 간 과제를 주도하고 이해관계자에게 인사이트를 전달한 경험

보상

• 미국 기본 연봉 USD 119,800~234,700

• 샌프란시스코 베이 지역 및 뉴욕시 대도시권 기본 연봉 USD 160,200~261,000

• 일부 직무의 복리후생 및 기타 보상 가능

마감기한

채용시 마감