《时代》杂志为AI机器人提供精简版Markdown网站,内置广告
《时代》杂志现在为AI机器人提供简化版的Markdown格式网站内容,而非标准HTML,并内置广告块。这一举措由一位开发者发现,采用了Mobian的广告平台,按消耗的令牌数而非页面浏览量收费。
《时代》杂志已开始向AI机器人提供其网站的简化版本,与普通用户所见内容不同。一些AI服务收到的不是标准的HTML页面,而是紧凑的Markdown格式内容,其中嵌入了广告块。一名来自Vroni.com的开发者在比较不同User-Agent值下的服务器响应时注意到了这一异常行为。当通过Chrome、Safari和Googlebot访问时,《时代》返回了约303KB的标准HTML页面,但当通过ClaudeBot、PerplexityBot和OAI-SearchBot访问时,则返回了约13KB的简化版Markdown内容,没有样式、图片或脚本,专为AI模型快速处理而设计。GPTBot和ChatGPT-User收到了406错误,表明其对不同类型AI机器人采取了选择性处理方式。Markdown版本使用Mobian的广告平台创建,为每个请求分配唯一标识符,并包含防止缓存的头部,同时通过x-mobian-tokens参数追踪令牌使用情况,这意味着其盈利基于AI消耗的令牌而非页面浏览量。内容也有所不同:例如,AI机器人在‘2025年最佳发明’汇编中看到来自Ally Bank的赞助区域,而普通用户则看到来自项目管理协会(PMI)的不同广告,此类赞助帖子被标记为赞助,但仅对AI机器人显示。《时代》报告称,在某些日子里,AI机器人的流量超过了普通用户的访问量,而Googlebot仍然收到与人类相同的HTML版本。
来源: 3DNews —
原文
