网站站长过去得在一个很别扭的选择里二选一：让内容被拿去训练 AI，或者冒着失去搜索可见度的风险拒绝。这个两难来自一个现实——互联网上最大的那些组织用的都是"混合用途爬虫"：同一个爬虫既做搜索索引，又做 AI 训练。你拒绝一个，等于两个都拒绝。 Cloudflare 近日推出的方案想把这个选择题拆开。新的 Disallow AI ...

来源：https://www.oschina.net/news/502510/cloudflare-accountable-mixed-use-ai-crawlers