2025年7月4日,互联网基础设施巨头Cloudflare宣布默认拦截所有未经许可的AI网络爬虫抓取网站内容,要求AI公司须获网站所有者同意才能访问数据。这一举措可能终结AI厂商免费获取数据的时代。从7月初起,新接入Cloudflare的站点默认拒绝AI爬虫访问,并推出按次付费爬取模式,允许出版商向AI公司收费。Cloudflare通过其Turnstile验证系统结合行为分析和机器学习技术识别并阻拦未经授权的AI爬虫,保护内容创作者权益。同时,Cloudflare还为自身开辟了新的商业模式,扮演内容提供方与AI公司间的中介角色,收取服务费用。此举或将改变网络内容利益分配格局,也为AI训练数据获取设置了门槛。
原文链接
本文链接:https://kx.umi6.com/article/21182.html
转载请注明文章出处
相关推荐
换一换
SEO已死,GEO当立?AI已经是流量新守门人了
2025-10-02 10:10:00
Reddit 被曝屏蔽多个搜索引擎和 AI 爬虫,官方称与谷歌合作无关
2024-07-25 14:04:29
Cloudflare将默认阻止AI爬虫抓取网页内容
2025-07-02 09:04:41
Cloudflare 宣布 AI Gateway 普遍可用
2024-06-06 18:01:48
折磨人类的验证码 已经拦不住人机了
2025-10-06 00:27:48
消息称 Anthropic 及 OpenAI 的 AI 爬虫“蚕食”互联网,内容网站被“吸血”后回报寥寥
2026-01-13 08:20:02
AI全面战争,从爬虫毁灭互联网开始
2025-03-24 22:20:53
Cloudflare 推出新举措:助力网站抵御 AI 爬虫,探索“按爬取付费”模式
2025-07-01 21:59:41
Cloudflare 称 Perplexity 绕过限制,抓取明令禁止 AI 抓取的网站
2025-08-05 18:17:26
GPT-4o连验证码都解不了??SOTA模型成功率仅40%
2025-06-04 17:27:46
美国最大出版商 CEO 怒怼谷歌:用同一爬虫偷内容喂 AI,我们还不好屏蔽
2025-09-14 16:41:18
AI观察:GPT-5延期?Cloudflare与苹果PCC
2024-06-22 16:28:13
你的验证码又升级了:虐完人类不过瘾,现在要收拾AI 了
2025-07-04 11:39:54
695 文章
479654 浏览
24小时热文
更多
-
2026-01-23 22:19:57 -
2026-01-23 22:18:50 -
2026-01-23 22:17:41