cloudflare

A5站长网消息，Cloudflare调整了AI爬虫的默认策略。按官方公告，新接入的站点以及仍在使用默认设置的免费版账户，广告承载页面上的训练类与智能体类爬虫将被默认拦截，搜索类爬虫保持放行。官方同时上线了DisallowAITraining这一设置，允许站点在拒绝AI训练的同时继续留在搜索结果中。这次调整把此前的一个开关拆成了三个独立控制项：搜索、AI训练、AI智能体。站点可以分别设置为允许、仅在