网站反爬虫机制Anubis v1.21.3

2025-08-17

为了对抗AI公司的大规模数据抓取,该网站部署了名为Anubis的反爬虫系统。Anubis采用类似Hashcash的PoW机制,少量访问影响可忽略,但大规模抓取将显著增加成本。此举旨在为更精细的反爬虫技术(例如,通过字体渲染识别无头浏览器)争取时间,最终目标是只对恶意爬虫施加限制,保证正常用户的访问体验。

阅读更多
杂项

网站反爬虫机制Anubis:对抗AI大规模数据抓取

2025-08-13

为了对抗AI公司大规模抓取网站数据导致的服务器宕机问题,该网站部署了名为Anubis的反爬虫机制。Anubis采用类似Hashcash的PoW方案,对单个访问影响微小,但对大规模爬虫则成本显著增加,以此作为一种权宜之计。最终目标是识别并区分正常的用户访问和headless浏览器,从而避免对普通用户造成影响。Anubis需要现代JavaScript支持,请禁用JShelter等JS禁用插件。

阅读更多
科技