亚马逊AI爬虫导致Git服务器崩溃
2025-01-18
博主Xe Iaso的Git服务器(gitea.xeserv.us)被亚马逊的AI爬虫攻击,导致服务器不稳定。尽管博主尝试了添加robots.txt、nginx配置阻止特定User-Agent等方法,但爬虫仍然通过不断变化的IP地址和伪造的User-Agent进行攻击。无奈之下,博主只能将服务器移至VPN之后,并计划开发一个基于工作量证明的代理来防御未来的攻击。这篇文章表达了博主对亚马逊AI爬虫过度消耗资源的无奈和愤怒,并呼吁亚马逊停止攻击或进行协商解决。