YC 지원 스타트업, 창립 웹 스크래핑 엔지니어 채용
2025-03-04
YC 지원 스타트업에서 수백만 개의 도메인과 지속적으로 발전하는 봇 방지 기능을 처리할 수 있는 인터넷 규모의 웹 크롤링 인프라를 구축할 창립 웹 스크래핑 엔지니어를 채용하고 있습니다. 이 역할에는 대규모 웹 스크래핑 및 크롤링(Selenium, Puppeteer, Playwright, Scrapy 등)에 대한 전문가 수준의 경험, 봇 탐지 전략에 대한 깊이 있는 이해, CAPTCHA 해결, 프록시 관리, 데이터 정리에 대한 입증된 경험이 필요합니다. 이 플랫폼은 RL 기반 최적화를 위한 브라우저 짐을 포함하여 웹 에이전트의 엔드투엔드 테스트를 제공하는 것을 목표로 합니다.