106 مليون طلب من ClaudeBot: ما تكلفته الحقيقية لوسائل الإعلام المتخصصة من زاحفات الذكاء الاصطناعي

نشرت ActuIA، وهي وسيلة إعلامية متخصصة في أخبار الذكاء الاصطناعي، تحليلاً لسجلات الخوادم الخاصة بها يُظهر أنه بين فبراير 2025 ومايو 2026، أرسل ClaudeBot، وهو زاحف الذكاء الاصطناعي الخاص بشركة Anthropic، 106,154,885 طلباً إلى خوادمها. كانت أحجام الطلبات متواضعة حتى خريف 2025، لكنها انفجرت بدءاً من ديسمبر 2025، لتصل إلى ذروات تتجاوز 25 مليوناً في أبريل 2026، حيث استكشف ClaudeBot بشكل منهجي الوسوم وإصدارات اللغة وصفحات الترقيم، خاصة بعد إعادة تصميم الموقع. لم تقم ActuIA أبداً بحظر أو تقييد هذه الوصولات، حيث عاد أكثر من 99% من الطلبات برمز HTTP 200. قارنت ملاحظة استمرت أسبوعين من 29 مايو إلى 12 يونيو 2026 بين طلبات الزاحف والزوار المحالين: احتاجت Anthropic إلى 3,268 طلباً لكل زيارة (57 زيارة)، بينما احتاجت OpenAI إلى 226 طلباً لكل زيارة (7,018 زيارة). يستهلك الزحف الثقيل النطاق الترددي، والحوسبة، والتخزين، وموارد المراقبة، ويعقد قياس الجمهور. تظل ActuIA منفتحة على زواحف الذكاء الاصطناعي، وقد نفذت ملف llms.txt، لكنها ترى أن الانفتاح دون تعويض ليس نموذجاً اقتصادياً قابلاً للاستمرار. وتشير إلى أن Cloudflare قدمت خاصية "الدفع مقابل الزحف"، وأن قواعد التعدين في النصوص والبيانات في الاتحاد الأوروبي تسمح لأصحاب الحقوق بالانسحاب، ولكن هناك حاجة إلى تحول أوسع في الصناعة لضمان حصول منتجي المحتوى على قيمة عادلة.