网站反爬虫机制Anubis
2025-09-15
为对抗AI公司大规模爬取数据造成的服务器宕机，该网站部署了名为Anubis的反爬虫系统。Anubis采用类似Hashcash的PoW机制，对单次访问影响较小，但大规模爬取会显著增加成本。这是一个临时方案，最终目标是通过识别无头浏览器等手段，精准打击爬虫，而无需对普通用户展示PoW页面。请注意，Anubis依赖现代JavaScript特性，需禁用JShelter等插件才能正常访问。
阅读更多
科技