Time sirve a los bots de IA una versión Markdown simplificada de su sitio con anuncios integrados

La revista Time ha comenzado a servir a los bots de inteligencia artificial una versión separada y simplificada de su sitio web, distinta de la que ven los usuarios habituales. En lugar de páginas HTML estándar, algunos servicios de IA reciben contenido compacto en formato Markdown con bloques de anuncios integrados. Un desarrollador de Vroni.com notó este comportamiento inusual al comparar las respuestas del servidor con diferentes valores de User-Agent. Cuando se accedía desde Chrome, Safari y Googlebot, Time devolvía páginas HTML estándar de unos 303 KB, pero cuando se accedía desde ClaudeBot, PerplexityBot y OAI-SearchBot, devolvía una versión Markdown reducida de unos 13 KB, sin estilos, imágenes ni scripts, diseñada para un procesamiento rápido por parte de los modelos de IA. GPTBot y ChatGPT-User recibieron un error 406, lo que indica un enfoque selectivo hacia los diferentes tipos de bots de IA. La versión Markdown se crea mediante la plataforma publicitaria de Mobian, asigna un identificador único a cada solicitud e incluye cabeceras que impiden el almacenamiento en caché y rastrean el uso de tokens mediante un parámetro x-mobian-tokens, lo que significa que la monetización se basa en los tokens consumidos por la IA en lugar de las visitas a la página. El contenido también difiere: por ejemplo, los bots de IA ven una sección patrocinada del Ally Bank en una compilación de 'Mejores inventos de 2025', mientras que los usuarios habituales ven un anuncio diferente del Project Management Institute (PMI), y dichos contenidos patrocinados se marcan como tales, pero solo se muestran a los bots de IA. Time informa que en algunos días el tráfico de bots de IA supera al de los usuarios habituales, mientras que Googlebot sigue recibiendo la misma versión HTML que los humanos.