Cloudflare تحدد موعداً نهائياً لإجبار شركات الذكاء الاصطناعي على الدفع للناشرين

أعلنت Cloudflare عن تحول جذري في سياستها يهدف إلى الفصل بين عمليات الزحف التقليدية لمحركات البحث وبين تدريب نماذج الذكاء الاصطناعي والخدمات الوكيلية (agentic services). ومن خلال تطبيق إعدادات افتراضية صارمة جديدة، تهدف شركة الحوسبة الطرفية العملاقة إلى حماية الملكية الفكرية وإنشاء نظام اقتصادي مستدام لناشري الويب.

نهاية الزواحف "متعددة الاستخدامات"

في خطوة تتحدى الوضع الراهن لعمليات كشط البيانات (data-scraping)، حددت Cloudflare موعداً نهائياً في 15 سبتمبر 2026 لمعالجة صعود الزواحف "متعددة الاستخدامات". وهي عبارة عن برمجيات آلية (bots) تدمج بين فهرسة البحث التقليدية وتدريب نماذج الذكاء الاصطناعي والوظائف الوكيلية. وبدءاً من ذلك التاريخ، ستقوم الإعدادات الافتراضية لـ Cloudflare تلقائياً بحظر هذه الزواحف الهجينة من الوصول إلى أي صفحات تحتوي على إعلانات.

ينطبق هذا التغيير في السياسة على جميع عملاء Cloudflare الجدد، والمواقع الجديدة التي ينشئها العملاء الحاليون، وجميع مستخدمي الفئة المجانية الحاليين. والهدف هو إجبار شركات الذكاء الاصطناعي على توضيح نواياها: فإذا أراد الروبوت فهرسة موقع ما لأغراض البحث، فإنه يتبع مساراً واحداً؛ أما إذا أراد استيعاب البيانات لتدريب نموذج لغوي كبير (LLM)، فيجب عليه اتباع مسار آخر—مسار قد يتطلب تعويضاً مادياً.

تحدي هيمنة عمالقة البحث

ومن الدوافع الرئيسية وراء هذا القرار هو الميزة غير العادلة التي تتمتع بها محركات البحث الكبرى. وقد سلطت Cloudflare الضوء بشكل خاص على أن أكبر محرك بحث في العالم—والمعروف على نطاق واسع بأنه Google—يتمتع حالياً بالوصول إلى معلومات تزيد بنحو "ضعفين" عما يمتلكه منافسوه في مجال الذكاء الاصطناعي.

وبينما توفر Google خدمة "Google Extended" للسماح للناشرين برفض المشاركة في تدريب الذكاء الاصطناعي دون التأثير على ظهورهم في نتائج البحث، إلا أن برنامج Googlebot الرئيسي يستمر في الزحف على نطاق واسع لتشغيل ميزات مثل AI Overviews. ويسعى تدخل Cloudflare إلى تكافؤ الفرص، لضمان عدم تمكن شركات الذكاء الاصطناعي من استغلال قدرات الفهرسة الهائلة لمحركات البحث لتدريب نماذجها مجاناً.

الانتقال نحو نماذج "الدفع مقابل الاستخدام"

بعيداً عن مجرد الحظر، تعمل Cloudflare بنشاط على بناء البنية التحتية لاقتصاد محتوى جديد. حيث تقوم الشركة بتطوير سوقها "Pay Per Crawl" إلى نموذج أكثر تطوراً وهو "Pay Per Use". وبموجب هذا الإطار، يمكن للناشرين فرض رسوم على شركات الذكاء الاصطناعي ليس فقط مقابل عملية جلب البيانات، بل أيضاً عندما يولد هذا المحتوى قيمة فعلية.

ولتجربة هذا النموذج، تتعاون Cloudflare مع Ceramic.ai و You.com. ومن خلال هذه الشراكات، يمكن للناشرين الحصول على تعويض مباشر عندما يظهر محتواهم في نتائج بحث Ceramic المدعومة بالذكاء الاصطناعي أو عندما يصل You.com إلى مواد مميزة. ويعالج هذا التحول خللاً حرجاً في الويب الحالي: حيث تكشف بيانات Cloudflare أن أكثر من 50% من حركة مرور زواحف الذكاء الاصطناعي تُهدر في إعادة جلب صفحات لم تتغير، وهي عملية تستنزف النطاق الترددي للناشرين وموارد حوسبة الذكاء الاصطناعي على حد سواء.

لماذا يهم هذا مشهد الذكاء الاصطناعي

مع تجاوز حركة المرور غير البشرية لحركة المرور البشرية على الإنترنت، فإن عصر "كشط كل شيء مجاناً" بدأ يصطدم بحائط مسدود. وتشير خطوة Cloudflare إلى الانتقال نحو ويب أكثر تنظيماً وقائماً على المعاملات التجارية. وبالنسبة لمطوري الذكاء الاصطناعي، فإن هذا يعني نهاية عصر الحصول على البيانات دون عوائق وبتكلفة صفرية، مما يستلزم بناء علاقات أكثر شفافية وتعاوناً مع منشئي المحتوى لضمان استدامة البيانات على المدى الطويل.

النقاط الرئيسية

  • الحظر الافتراضي: بدءاً من 15 سبتمبر 2026، ستعتمد Cloudflare بشكل افتراضي حظر الزواحف "متعددة الاستخدامات" من الصفحات المدعومة بالإعلانات.
  • التحول في تحقيق الربح: تنتقل Cloudflare من نموذج "Pay Per Crawl" إلى نموذج "Pay Per Use"، مما يسمح للناشرين بفرض رسوم على شركات الذكاء الاصطناعي بناءً على قيمة المحتوى.
  • مكاسب الكفاءة: تهدف السياسة الجديدة إلى تقليل نسبة الـ 50% من حركة مرور زحف الذكاء الاصطناعي التي تُهدر حالياً في إعادة جلب صفحات الويب التي لم تتغير.