一个不太被注意的统计数字:对于许多大型内容网站而言,AI Bot流量已经超过了人类读者流量的50%,且在过去一年里增长了超过300%。

ChatGPT、Claude、Gemini、Perplexity,以及数以千计的垂直AI应用——它们每天都在抓取你的文章、食谱、法律条款、技术文档、新闻报道,把这些内容消化进自己的回答里。被抓取的网站,服务了这些请求,承担了带宽和服务器成本,然后……什么都没有发生。没有点击,没有页面浏览,没有广告展示,没有订阅转化。

过去三年,这个问题被出版商、记者、内容创作者反复提出,但始终没有基础设施级的解决方案。有人提议通过robots.txt协议封锁AI爬虫,但这需要每个出版商逐一维护名单,而AI公司可以轻易绕过。有人提议通过法律手段,但版权诉讼周期漫长,结果不确定。

2026年6月17日,AWS在Summit NY宣布了一个新功能:AWS WAF AI流量变现能力(AI Traffic Monetization)

这是第一个基础设施级的、可以直接实施的、不需要单独谈判的内容付款机制。


一、AWS WAF做了什么

AWS WAF(Web Application Firewall)原本是一个防护工具,帮助网站拦截恶意流量、DDoS攻击等。它已经有了Bot Control功能,可以识别流量中的Bot请求,并允许网站主选择封锁或放行特定类型的Bot。

新增的AI Traffic Monetization,在Bot Control基础上增加了关键能力:定价和收款

具体运作方式:

  1. 识别:WAF Bot Control识别出一个AI爬虫请求(能区分GPTBot、ClaudeBot、PerplexityBot等)
  2. 询价:网站主在WAF控制台设置针对AI爬虫的价格规则(比如:GPTBot访问每篇文章$0.01)
  3. 支付请求:WAF返回402 Payment Required响应,附带支付信息
  4. 支付处理:AI服务商的Agent看到402响应,通过集成的支付流程付款
  5. 访问授权:付款确认后,WAF放行请求,内容正常返回

支付是通过Coinbase的x402协议处理的,用稳定币(主要是USDC)结算。Stripe的法币支付集成和Machine Payments Protocol(MPP)支持”即将推出”。

整个流程完全在WAF边缘执行,网站主不需要修改任何后端代码,不需要建立自己的支付系统,不需要与AI服务商签署任何合同。


二、为什么选择稳定币,而不是信用卡

AWS选择Coinbase的x402 stablecoin作为首个支付轨道,背后有深刻的技术逻辑。

机器付款天然需要可编程支付。当一个AI Agent在抓取内容时,它需要:实时评估内容是否值得付费、自动完成支付(无需人工确认)、处理微支付(每次$0.001–$0.01量级)、在全球任何地方都能用同一套支付轨道。

传统信用卡支付无法满足这些要求:支付确认有延迟,跨境手续费高,微支付不经济,API集成复杂。

稳定币,特别是USDC,天然适合:实时结算(秒级确认),极低手续费(微支付经济可行),无边界(全球AI服务商都能用),可编程(支付可以由代码自动触发)。

这实际上是把”HTTP 402 Payment Required”——这个在1998年就被定义进HTTP协议却从未被大规模使用的状态码——在2026年的AI时代激活了。

x402协议是Coinbase发布的开放规范,定义了如何在标准HTTP请求-响应流程中嵌入机器可读的支付请求。AWS WAF采用x402,意味着任何支持x402的AI服务商都可以自动完成支付,不需要每个网站和每个AI服务商单独对接。这是协议层面的解决方案,而不是点对点的商业合同


三、互联网内容经济的三次结构性革命

要理解AWS WAF AI流量变现的历史意义,需要回到互联网内容经济的演进逻辑。

第一次革命:广告(1990年代末至今)。雅虎、谷歌发现了一个模式:免费内容 + 广告 = 可持续商业。内容创作者给用户免费内容,用户给广告商注意力,广告商给内容创作者钱。这个模式主导了互联网内容经济20年。局限:内容价值被稀释,广告收入越来越集中于平台(谷歌、Meta),Ad Block普及进一步侵蚀。

第二次革命:订阅(2010年代末至今)。Substack、Patreon、NYT数字订阅、Netflix——用户直接为内容付费,绕过广告商。局限:订阅疲劳,内容价值难以被单篇评估,发现机制依然依赖免费内容做入口。

第三次革命:机器付款(2026年开始)。AI Bot是最大的内容消费者,且有能力付费,有动机付费(不付费会被封锁)。机器付款协议让这个过程自动化。

这三次革命不是相互替代的,而是叠加的。但第三次革命有一个前两次都没有的特征:付款方不是人类,是程序。这意味着支付可以按每次请求定价(而不是按月订阅),付款决策可以由AI Agent自动做出,内容的即时价值可以被定量评估,出版商对流量的控制力大幅增强。


四、谁会是第一批受益者,谁会抵制

不是所有内容出版商都会迅速采用这个功能。利益分化明显。

可能快速采用的:付费内容出版商(金融数据、法律数据库、医疗信息——这些内容本来就是为专业用户付费设计的,AI Bot付费使用是顺理成章的)、小型专业媒体(没有足够流量吸引大广告主,但AI服务商愿意为高质量专业内容付费)、技术文档网站(Stack Overflow、技术博客——AI编程工具大量抓取这些内容,理应分享收益)。

可能抵制或观望的:大型媒体(NYT等已与AI公司单独谈判,不愿接受AWS作为中间层)、追流量的内容农场(核心价值就是被AI抓取后增加曝光,封锁AI Bot损害其基本商业逻辑)。

最关键的问题:AI服务商愿意付费吗? 目前,方案要求AI服务商收到402 Payment Required响应时主动支付。但AI公司完全可以选择:看到402响应,放弃访问,不付款。

这个博弈的结果取决于谈判筹码:如果大多数出版商都部署了这个功能,AI服务商就面临无内容可抓的压力;如果只有少数先驱者,AI服务商的选择很简单——不付款,从其他地方抓。AWS WAF降低了部署成本,但不能解决协调问题本身。


五、更大的问题:AI时代的内容激励机制

AWS WAF功能背后,有一个更根本的张力:AI时代的内容价值链正在被重构,但目前没有被广泛接受的价值分配方案

在传统互联网中,谷歌抓取内容,建立索引,在搜索结果页展示,并把流量返回给原始网站。流量就是价值:你给了我内容,我给你带来了读者。整个系统虽然对谷歌极度有利,但内容网站至少获得了读者,并能通过广告或订阅从读者身上获得价值。

AI搜索打破了这个循环。Perplexity给出一个综合答案,用户看完就走了,不点击任何原始链接。ChatGPT生成一篇旅游攻略,整合了十几个网站的内容,但没有用户会去访问那十几个网站。内容被消费,但流量没有回流

长期来看,如果内容创作者失去了经济激励,AI系统训练和检索的内容质量也会下降。这是一个经典的公地悲剧:每个人消耗公共资源(内容),没有人为维护公共资源(支持内容创作者)付费。

AWS WAF的AI流量变现,以及x402协议,是第一批认真尝试从基础设施层面解决这个问题的努力。能否成功,取决于很多超出AWS控制的因素:AI服务商是否会采用,出版商是否会协调,监管者是否会施加压力。

但方向是对的:如果AI要消费内容,它就应该为内容付钱,而不是无偿消费并系统性摧毁支撑内容生态的经济基础


结语:把HTTP 402从垃圾桶里挖出来

1998年,HTTP/1.1协议被定义的时候,RFC 2616的作者们预见到了未来可能存在付费访问的需求,于是定义了402 Payment Required状态码,并写下了”Reserved for future use”(留待未来使用)。

28年后,这个”未来”到了。不是因为人类开始大规模为网页付费(事实上这从来没有大规模发生),而是因为AI Agent的出现创造了第一类真正需要机器付款的网络请求:一个自动运行的程序,需要实时评估内容价值,自动完成微支付,以换取访问权限。

AWS WAF不只是发布了一个新功能。它在尝试把一个被闲置了28年的协议规范激活成现实,同时解决互联网内容经济最棘手的问题之一。

成功与否,市场会给出答案。但这一次,基础设施已经就位了。


参考资料:

  • AWS News Blog - “AWS WAF adds AI traffic monetization capability to help content owners charge AI bots for content access” (2026-06-15)
  • AWS Summit NY 2026 主题演讲 (2026-06-17)
  • Coinbase x402 Protocol 规范文档
  • RFC 2616 - HTTP/1.1 标准(1998)