OpenAI机器人攻陷小型电商网站
2025-01-10
一家只有七名员工的电商公司Triplegangers,其网站被OpenAI的机器人GPTBot以类似DDoS攻击的方式压垮。GPTBot疯狂抓取Triplegangers超过65,000种产品的图片和描述,导致网站瘫痪,并产生巨额AWS费用。Triplegangers事后发现,其网站的robots.txt文件配置不当,未能有效阻止GPTBot抓取。尽管OpenAI声称尊重robots.txt,但其机器人并未立即响应更新的robots.txt文件。此事件凸显了AI数据抓取对小型企业造成的潜在风险,以及OpenAI承诺的opt-out工具迟迟未交付的问题。
科技
AI数据抓取