人工智能工具大规模抓取网站内容用于模型训练，正在打破互联网长达30年的内容流通生态。根据Cloudflare的数据，超过50%的网络流量现已来自AI爬虫。为了维护自身收益，越来越多网站开始采取措施阻止AI爬虫访问。Cloudflare表示，从9月15日起，其管理的全球前10,000个网站中超过30%将在包含广告的页面…
