网站反爬虫机制Anubis:对抗AI大规模数据抓取

2025-08-13

为了对抗AI公司大规模抓取网站数据导致的服务器宕机问题,该网站部署了名为Anubis的反爬虫机制。Anubis采用类似Hashcash的PoW方案,对单个访问影响微小,但对大规模爬虫则成本显著增加,以此作为一种权宜之计。最终目标是识别并区分正常的用户访问和headless浏览器,从而避免对普通用户造成影响。Anubis需要现代JavaScript支持,请禁用JShelter等JS禁用插件。

科技