Cloudflare，作为全球最大的互联网基础设施公司之一，近日宣布推出了一款名为"AI 迷宫"的新工具，用于对抗未经许可爬取网站数据用于 AI 训练的爬虫机器人。该公司在一篇博客文章中表示，当检测到"不当的机器人行为"时，这个免费的选择性工具会将爬虫引导至一

迷宫 机器人 爬虫 cloudflare 爬虫机器人 2025-03-25 23:43  2