데이터 크롤링 전문가

담당업무

• 글로벌 기업 사이트의 제품 스펙·가격·이미지 및 뉴스·블로그 콘텐츠 크롤링 시스템 설계·개발

• 수집·정제·적재 데이터 파이프라인 구축 및 자동화

• 수집 성능 모니터링, 소스 사이트 구조 변경 감지 및 장애 대응

• 수집 데이터 품질 검증 및 지속적 유지보수

자격요건

• Python 기반 크롤링·스크래핑 개발 경험

• Selenium, Playwright, BeautifulSoup, Requests 활용 경험

• 다국어·다국가 사이트 파싱 경험

• HTML 구조 분석 및 XPath·CSS 셀렉터 활용

• SQL 활용 및 데이터 적재·검증 쿼리 작성

• AWS 또는 OCI 환경 구축·운영 경험

우대사항

• 대규모 크롤링 시스템 운영 경험

• 분산 크롤링 및 큐 기반 작업 관리 경험

• Airflow 등 워크플로우 오케스트레이션 도구 활용 경험

• 데이터 파이프라인·ETL 구축 및 운영 경험

• FastAPI 또는 Flask 기반 API 서버 개발 경험

• Docker, Kubernetes 등 컨테이너 환경 배포 경험

• 정형 데이터와 비정형 데이터 혼합 처리 경험

• 장애인 우대

전형절차

1. 서류전형

2. 1차면접

3. 2차면접

4. 최종합격

5. 면접 이후 인성검사 실시 가능

6. 화상 인터뷰 및 대면 인터뷰 병행

근무환경

• 상시 출근

마감기한

2026년 9월 30일 23:59까지