网站反爬虫机制Anubis v1.21.3
2025-08-17
为了对抗AI公司的大规模数据抓取,该网站部署了名为Anubis的反爬虫系统。Anubis采用类似Hashcash的PoW机制,少量访问影响可忽略,但大规模抓取将显著增加成本。此举旨在为更精细的反爬虫技术(例如,通过字体渲染识别无头浏览器)争取时间,最终目标是只对恶意爬虫施加限制,保证正常用户的访问体验。
杂项