Patreon 联手 Cloudflare 主动阻止 AI 训练爬虫
Patreon 从请求转为主动阻止 AI 训练爬虫，与 Cloudflare 合作封禁无视 robots.txt 的爬虫，保护创作者内容不被无偿使用。
Patreon 发现其 robots.txt 文件（一种告知爬虫如何访问网站的标准协议）被 AI 训练爬虫无视，于是不再只靠请求，而是与 Cloudflare 合作直接封禁此类爬虫。测试中，爬虫的访问尝试从每周数千次降为零。这反映出内容平台对 AI 无偿抓取作品训练模型的担忧加剧。Patreon 称将允许索引类爬虫（用于引导用户回平台），但训练类爬虫一律阻挡，给创作者控制权。
正文摘录
Patreon 不再请求 AI 机器人不要抓取 —— 转而直接封锁它们 [Patreon](https://www.patreon.com/)，创作者会员平台，正在加大力度打击 AI 对其内容的抓取行为，以防用于训练。周四，该公司宣布正与互联网基础设施提供商 Cloudflare 合作，直接阻止那些设计用来在未经许可的情况下、将创作者作品用于训练 AI 模型的机器人。 这一强化措施之所以必要，是因为自 2023 年首次采取措施阻止 AI 爬虫以来，AI 抓取行为变得更加复杂。此外，Patreon 的付费墙长期以来把创作者的绝大部分内容封锁在爬虫触达范围之外。但最近，公司推出了新的发现工具，例如重新设计的主页 Feed 和 [类似推文的 Quips](https://www.theverge.com/tech/920988/patreons-tweet-like-quips-are-now-widely-available)，这些工具可能使更多内容暴露给爬虫。 这些变化发生之际，越来越多的在线出版商和内容创作者正在认识到 AI 如何摄取他们的作品以使其 AI 模型更智能。为应对这一情况，Cloudflare 现在提供工具，允许网站发布者 [限制 AI 机器人](https://techcrunch.com/2024/07/03/cloudflare-launches-a-tool-to-combat-ai-bots/)，包括一个 [允许网站向 AI 机器人收取抓取费用的市场](https://techcrunch.com/2025/07/01/cloudflare-launches-a-marketplace-that-lets-websites-charge-ai-bots-for-scraping/)，名为 Pay Per Crawl。