OmniTools 7月17日消息，内容创作者平台Patreon宣布与Cloudflare合作，启用AI Crawl Control技术，主动拦截未经许可抓取其平台内容用于AI模型训练的网络爬虫。此举标志着其策略从依赖robots.txt文件的被动提示，转向基于技术手段的主动阻断。
Patreon指出，自2023年首次部署反AI爬虫措施以来，相关爬虫技术日趋复杂；近期推出的Home Feed和Quips等新发现功能也可能增加内容暴露风险。测试显示，实施拦截后，部分AI训练爬虫对平台的周访问尝试量已从“数千次降至零”。
该公司明确允许仅用于索引和跳转的合规爬虫，但禁止混合用途（即同时索引与训练）的爬虫访问含广告页面。Patreon产品负责人Drew Rowny表示：“创作者应能决定其作品如何被AI公司使用，而非被迫接受训练以换取曝光。”
