AI Bots Scan TLS Certificate Logs: Any Information Used to Train LLMs
Human Security
OpenAI
According to Human Security's report, over the past year, AI traffic on the internet has grown by 187%, and the activity of AI agents has increased nearly 80-fold. AI bots now even scan TLS certificate logs to discover new domains, while sites with useful content face bots making up to 90% of their traffic. Experts speak of the end of the Open Web, as content is instantly absorbed by AI to train large language models, and human traffic plummets.
Human Security, yayınladığı State of AI Traffic raporunda, son bir yılda internetteki yapay zeka trafiğinin %187 arttığını, yapay zeka ajanlarından gelen trafiğin %7851, yapay zeka kazıyıcılarından gelen trafiğin ise %597 yükseldiğini açıkladı. Yapay zeka trafiği, insan trafiğinden sekiz kat daha hızlı büyüyor. Mağazalar ve medya kuruluşları gibi taze içerik sunan siteler en büyük baskıyı yaşıyor; bu sitelerde botların payı %90'a yaklaşıyor. Rapor, Human Defense Platform verilerine dayanıyor. Cloudflare CEO'su Matthew Prince, 2027 yılına kadar yapay zeka botlarının insan trafiğini geçeceğini öngörmüştü, ancak bu durum 2026'da gerçekleşti. Uzmanlar, durumu Açık Ağ'ın sonu olarak nitelendiriyor: içerik anında yapay zeka botları tarafından tüketiliyor ve büyük dil modellerini (LLM) eğitmek için kullanılıyor, bu da insan trafiğinde felaket bir düşüşe yol açıyor (örneğin, teknoloji medyasının ziyaretçi sayısı %50'den fazla azaldı). Yayıncılar, Internet Archive'i bile engelleyerek ücretli erişime geçiyor. Yapay zeka botları, tarama için yeni alan adlarını tespit etmek amacıyla TLS sertifika günlüklerini (Certificate Transparency) bile tarıyor: bir kullanıcı sertifika kaydettiği anda, sunucuya neredeyse anında ilk ziyaretçi geliyor, örneğin OpenAI'nin OAI-SearchBot'u. Ayrıca, iflas etmiş şirketlerin bilgi arşivleri LLM eğitimi için satın alınırken, faaliyetteki firmalar çalışanlarının yazışmaları ve dosyalarına dayanarak 'dijital ikizler' oluşturuyor. Fabrikalarda çalışanlar, sözel olmayan davranışları kaydetmek için kafalarına video kamera takarak çalışıyor. İnsanlar tarafından üretilen her türlü bilgi (UGC) değerli hale geldiğinden, canlı çalışanlar şu anda özellikle talep görüyor.
Kaynak: Хабр — Data Mining —
orijinal
