AI-bots scannen TLS-certificaatlogboeken: alle informatie gebruikt om LLM's te trainen

Het rapport 'State of AI Traffic' van Human Security onthult een dramatische toename van AI-botactiviteit: het verkeer van AI-agents steeg met 7.851%, dat van AI-scrapers met 597% en het totale AI-verkeer met 187% — acht keer sneller dan menselijk verkeer. Begin 2026 haalde AI-verkeer officieel het menselijke verkeer in, waarbij bots bijna 90% van de bezoeken aan contentrijke sites zoals e-commerce en media voor hun rekening namen. Het aantal nepaccounts groeit exponentieel. Experts spreken van het einde van het open web, omdat content direct door bots wordt geconsumeerd om taalmodellen (large language models, LLM's) te trainen, waardoor menselijk verkeer kelderde (bijvoorbeeld technologiemedia verloren meer dan 50% van hun bezoekers). Uitgevers plaatsen content achter betaalmuren en blokkeren zelfs het Internet Archive. Bots scannen ook TLS-certificaatlogs (Certificate Transparency-logs) om nieuwe domeinen te ontdekken om te crawlen. Het rapport is gebaseerd op gegevens van het Human Defense Platform. Matthew Prince, CEO van Cloudflare, voorspelde dat dit omslagpunt in 2027 zou plaatsvinden, maar het gebeurde al eerder in 2026. Daarnaast verkopen databrokers nu archieven van interne bedrijfscommunicatie voor LLM-training, en bedrijven creëren 'digitale tweelingen' van medewerkers op basis van chatlogs, e-mails en video-opnames om vaardigheden te reproduceren als een medewerker vertrekt.