主要观点:为保护内容创作者的安全互联网环境,Cloudflare 推出新“易按钮”可一键阻止所有 AI 机器人,包括免费用户。AI 流行导致对训练模型内容需求大增,部分 AI 公司未透明操作,如 Reddit 被谷歌付费授权用户生成内容,Perplexity 被指模仿合法访客抓取内容。去年 Cloudflare 已能让客户阻止行为良好的 AI 机器人,此次新增一键阻止所有 AI 机器人功能,可在 Cloudflare 仪表板的“安全>机器人”部分操作,该功能会随新违规机器人指纹更新。
关键信息:
- 新“易按钮”可一键阻止所有 AI 机器人,免费用户也可用。
- AI 机器人活动方面,Bytespider、Amazonbot、ClaudeBot 和 GPTBot 是最受欢迎的 AI 爬虫,Bytespider 不仅请求数最多,在互联网属性爬取范围和被阻止频率上也领先。
- 网站运营商常通过 robots.txt 阻止 AI 爬虫,但易被篡改,且很多客户未意识到热门 AI 爬虫在爬取其网站。
- 观察到有 bot 运营商通过伪造用户代理伪装成真实浏览器,Cloudflare 的机器学习模型能识别此类行为并自动阻止相关流量。
- 有两种报告行为不当 AI 爬虫的方式,Enterprise Bot Management 客户可通过 Bot Analytics 提交反馈循环报告,其他客户可通过特定报告工具提交。
重要细节: - Cloudflare 的连接云可保护整个企业网络、构建互联网规模应用、加速网站或应用、抵御 DDoS 攻击、防范黑客等。
- 可访问 1.1.1.1 开始使用免费应用以加快和保障互联网安全,了解更多可从“学习什么是 Cloudflare”开始,找工作可查看“开放职位”。
- 文中提及多个相关标签,如 Bots、Bot Management、AI Bots、AI、Machine Learning、Generative AI 等。
**粗体** _斜体_ [链接](http://example.com) `代码` - 列表 > 引用
。你还可以使用@
来通知其他用户。