Cloudflare推出AI迷宫,打击爬虫滥用行为
Cloudflare开发了一种名为“AI迷宫”的工具,旨在通过生成大量垃圾内容来消耗AI爬虫的资源。这一举措是为了应对近1%的网络访问请求来自AI爬虫的情况,这些爬虫可能用于收集数据以训练AI模型。该解决方案允许用户使用爬虫访问网站,但网站本身会利用生成式AI创建看似真实但毫无价值的内容,使爬虫陷入无意义的链接迷宫,从而浪费其时间和资源。
Cloudflare表示,这些内容不会影响网站声誉或搜索引擎优化,但能有效增加爬虫操作的成本,起到威慑作用。此外,这一工具还能帮助识别和标记恶意爬虫。Cloudflare计划未来进一步优化这一系统,使其更难以被爬虫识别。用户可通过管理控制台启用“AI迷宫”功能。
The Register📮
投稿 ☘️
频道 🌸
聊天