Cloudflare近日宣布，对使用其服务的网站默认配置进行重要调整，向整个人工智能行业设定一项新的“最后期限”：要求AI公司在今年9月15日前，将用于传统搜索的网络爬虫，与用于AI代理和模型训练的爬虫进行明确区分，否则这些“混合用途”爬虫将在大量带广告页面上被默认拦截。 根据Cloudflare公布的细则，凡是同时用于搜索、AI代理调用以及模型训练的数据抓取爬虫，如果访问的是承载广告的网页，将在默认配置下被阻止抓取，除非网站所有者主动修改相关设置。 这些新的默认设置将适用于新接入Cloudflare的…