时代杂志为AI机器人提供内置广告的简化版网站
时代杂志根据访问者身份返回不同版本网站:人类看到完整页面,AI爬虫则收到简化版markdown,其中嵌入广告并以token计费,这揭示了AI流量主导下网络内容的新趋势。
谷丙转氨酶5 6 Sol使用的令牌是GPT-5的两倍。5谷丙转氨酶5 6 Sol xhigh现在每个会话使用的令牌数量是GPT-5的两倍多。我的Codex工作流程中的5 xHigh。对于法典.《时代》杂志目前提供两个不同版本的网站。
人类得到了杂志。人工智能爬虫得到一个剥离下来的降价副本与广告烤在没有人会看到。我从同一台机器上一遍又一遍地获取了一篇普通的《时代》健康文章《晨光习惯睡眠专家们的誓言》,只改变了用户代理头每次。
这个头是每个浏览器和机器人发送的字符串,用来说明它是什么。《时代》阅读它并决定归还什么。作为Chrome,我得到了200 OK,text/html,和303,235个字节。完整页面、设计、图像、脚本。
与Safari一样,303 KB。与Googlebot一样,也有相同的303 KB HTML。然后我以助理爬虫的身份问道。作为ClaudeBot,我得到了200 OK,text/markdown,和13,409个字节。
与PerplexityBot一样,字节对字节相同。作为OpenAI的OAI-SearchBot,再次相同。相同的URL,相同的秒,大小的二十分之一,格式完全不同:没有HTML,没有布局,只是语言模型可以处理的干净标记。
有几个机器人甚至没有明白这一点。OpenAI用于培训和实时获取的代理GPTBot和ChatGPT-user返回406.被挡出.但OAI-SearchBot(为ChatGPT搜索索引提供信息的机器人)却被取消了降价。
因此,这不是一个全面的机器人政策。
《时代》正在根据机器人选择谁获得无阅读器版本。降价副本上的响应标题:内容类型:文本/markdown;charset=utf-8缓存控制:无商店x-Mobian-registry-版本:2026-07-28。
v9x-Mobian-印象:46 dfff 3c-fb 40 - 41 cc-85 e1 - 8b 1fa 637083 ax-Mobian-tokens:3323x-Mobian-form:MDMobian是一家广告技术供应商。
markdown页面实际上以<!开始-- Mobian-Agent-页面发布者=“时间”-->.那个x-Mobian-印象值是每个请求上的新UID。我获取了同一页面两次,并获得了两个不同的ID。
与缓存控制配对:无商店,这意味着每次机器人读取页面时,它都会被记录为不同的广告印象。和x-Mobian-tokens:3323告诉您正在计数的单位。不是一个人,不是一个页面浏览量。代币被输入模型。
文章本身没有广告。赞助单位显示在列表和部分页面上,每页一个。所以我拿了《时代》杂志2025年最佳发明集ClaudeBot。坐在降价,在那里没有人类读者会遇到它,是一个完整的盟友银行常见问题解答:>赞助内容。
与Ally合作提供。#谁是联合银行?Ally Bank是一家成立于2009年的在线银行。. . #什么银行是为当今的生活而建的?Ally将自己描述为当今唯一一家为生命而建的银行。. .它伴随着“哪些银行提供提前直接存款?
”等问题。”和“你可以在盟友银行存入现金吗?
”,每个人都用Ally自己的营销语言回答,外加常见问题页面JSON-LD阻止和跟踪链接标记活动=“盟友-2026-q3”.项目管理研究所的业务部门也有相同的待遇:一个“参考事实和常见问题解答”表,成员统计,声称经过认证的项目经理的收入多了16%,所有这些都被标记为赞助人。
这些页面的人类HTML不包含任何内容。当我将“Ally Bank”或“Mobian”加载为一个人时,它们的命中率为零。“艾莉·班克是谁?“写得就像用户询问ChatGPT在哪家银行开设帐户时模型发出的措辞一样。
广告在降价内被标记为赞助商,因此这不是经典意义上的未公开广告。隐藏的是观众的分裂。现在有一层时间。com完全为机器编写,阅读该网站的人们不知道它的存在,也不知道代表他们对模型说了什么。Googlebot会获得与人类相同的HTML,因此搜索排名爬虫会看到真实的页面。
只有助理爬虫才能获得分叉版本。《时代》杂志表示,在大多数日子里,其机器人流量已经超过了人类流量。对于许多出版商来说,这个数字很快就会成为现实。因此,这可能是第一次清楚地了解当主要受众是人工智能模型时网络开始变成什么样子。
向Vroni提供GitHub问题、错误报告、规范或大致想法。它读取仓库、计划更改、编写代码、运行检查并处理可供审查的拉取请求。看看弗罗尼。
电路