ماسك وترامب، هذا الثنائي في البيت الأبيض دخل مؤخرًا في مرحلة 2.0 من "حرب الكلمات". ومثل هذا الزوج من الأعداء السعداء، هناك صراع بين مجموعات الناشرين الأجانب وعمالقة الذكاء الاصطناعي - من جهة، هناك ناشرون كبار يريدون التعاون مع شركات الذكاء الاصطناعي، ومن جهة أخرى، هناك ناشرون عازمون على إفلاس عمالقة الذكاء الاصطناعي.
وفقًا للبيانات، فإن حركة مرور المواقع العالمية في انخفاض بعد ظهور البحث بالذكاء الاصطناعي وChatGPT؛ من ناحية أخرى، تتجاهل عمالقة الذكاء الاصطناعي "زواحف الذكاء الاصطناعي" بروتوكولات الزحف، مما يؤدي إلى تآكل بيانات جميع المواقع من خلال آلاف عمليات الزحف.
في هذه اللحظة، أخيرًا ظهرت شركة بنية تحتية، وأمسكت بيد صانعي المحتوى وقالت: "يمكننا أن نقول لا لعمالقة الذكاء الاصطناعي!"
كلودفلير، عملاق البنية التحتية للإنترنت الذي يتحكم في حوالي 20% من حركة المرور العالمية، والذي يُطلق عليه مستخدمو الإنترنت لقب "بوز" سايبري، أطلق في يوليو 2025 منتجًا تجريبيًا وسوقًا للتداول: "الدفع لكل زحف" - وضع قواعد جديدة للزواحف الذكية.
إما الحصول على ترخيص أو الدفع.
ببساطة، جوهر هذه الميزة هو إعطاء منشئي محتوى الموقع خيار "التبديل": يمكنهم اختيار السماح لزواحف الذكاء الاصطناعي بالوصول بحرية، مع فرض رسوم على كل عملية زحف، أو مباشرة حظر الوصول.
وفقًا لما قاله مؤسس Cloudflare، "المحتوى هو الوقود الذي يدفع محرك الذكاء الاصطناعي، لذلك من العادل أن يحصل منشئو المحتوى على مكافآت مباشرة."
بالنسبة لشركات الذكاء الاصطناعي، لا يمكنها الاستمرار في جمع محتوى الويب بالكامل لتدريب النماذج كما كانت تفعل سابقًا "تناول العشاء مجانًا". ولكن ذلك ليس بدون فوائد، لأنه من خلال الدفع مقابل المحتوى بسعر محدد، يمكن تجنب مشاكل حقوق الطبع والنشر.
هل يمكن لإجراءات "مكافحة الزواحف" التي اتخذتها Cloudflare أن تخفف من هجمات الزواحف الذكية العشوائية؟ والأهم من ذلك، هل يمكن لهذه الشركة أن تستفيد من موقعها الفريد لإنشاء نموذج جديد لتوزيع المحتوى وتحقيق الأرباح في عصر الذكاء الاصطناعي؟
01
الغداء المجاني" لعمالقة الذكاء الاصطناعي
على مدار العقود الماضية، كانت معظم صفحات الويب افتراضيًا "قابلة للزحف" عامة. محركات البحث مثل جوجل وBing تجلب حركة المرور إلى المواقع، ومع حركة المرور، يمكن للمواقع تحقيق الإيرادات من خلال الإعلانات أو بيع الاشتراكات - هذه هي الاتفاقية غير المرئية لعصر البحث.
في عصر الذكاء الاصطناعي، انخفض تدفق البحث التقليدي بشكل حاد، وكلما حسبت هذه الأرقام، زادت الخسائر.
تعتبر شركات الذكاء الاصطناعي محتوى الشبكة كوقود للتدريب، ومع ذلك نادراً ما تعطي معظم المبدعين تعويضاً. عندما يطرح المستخدمون أسئلة مباشرة في روبوتات الدردشة الذكية، غالباً ما تكون الإجابات مستندة إلى محتوى مُلخص، وليس إلى عشرات الروابط الزرقاء، مما لن يجلب المزيد من الحركة إلى المواقع.
حتى عمالقة البحث مثل جوجل يتغيرون، سابقاً كانوا يقدمون قوائم روابط المواقع، والآن أطلقوا "نظرة عامة على الذكاء الاصطناعي" في صفحة البحث، وفقاً لتقريرهم، 75% من مستخدمي الاستعلامات يحصلون على إجابات دون الحاجة للنقر على أي رابط.
تظهر أحدث البيانات من Cloudflare لشهر يوليو 2025: أن زاحف جوجل يجلب حوالي نقرة واحدة لكل 6 إلى 7 مرات زحف لموقع الويب، بينما يحتاج OpenAI إلى 1500 مرة للحصول على نقرة واحدة، ونسبة Anthropic أكثر مبالغة، حيث تصل إلى 73300 مرة للحصول على نقرة واحدة.
نسبة النقرات التي جلبتها كل مرة زحف AI من الشركات الكبرى لمواقع الويب | مصدر الصورة: Cloudflare
هذا يعني أن نموذج "تبادل المحتوى مقابل الزيارات" التقليدي قد فشل. بالمقارنة مع محركات البحث التقليدية، فإن عمالقة الذكاء الاصطناعي قد استولوا على كميات هائلة من محتوى المواقع دون تقديم "توجيه"، مما جعل بعض منتجي المحتوى يجدون صعوبة متزايدة في الاستمرار.
"مع وجود OpenAI، أصبح الحصول على حركة مرور الموقع أصعب 750 مرة مقارنة بعصر Google، ومع وجود Anthropic، أصبحت الصعوبة أكثر من 30,000 مرة. السبب بسيط: نحن نستهلك بشكل متزايد المنتجات المشتقة بدلاً من المحتوى الأصلي." قال ماتيو برينس، الرئيس التنفيذي لشركة Cloudflare، في منشور مدونة، "هذه ليست صفقة عادلة."
تواجه شركات الذكاء الاصطناعي أيضًا تكاليف في جمع البيانات، حيث تم اتهام عمالقة الذكاء الاصطناعي خلال العامين الماضيين بـ "سرقة المحتوى" لتدريب نماذجهم الكبيرة، مما أدى إلى موجة من دعاوى حقوق الطبع والنشر على مستوى العالم، خاصة بين نيويورك تايمز وغيرها من وكالات الأخبار وOpenAI.
روبوت زحف AI النشط من الشركات الكبرى｜مصدر الصورة: Cloudflare
لذلك، أطلقت Cloudflare "Pay Per Crawl"، لإنشاء سوق "الدفع لكل زحف"، الذي تهدف إلى حل هذه المشكلة.
صممت الشركة نظامًا للأذونات والدفع، يمكن للموقع في الخلفية اختيار "السماح، الحظر أو فرض رسوم" على زاحف AI، وإذا أراد زاحف AI سحب محتوى هذا الموقع، يجب عليه التسجيل والتحقق من الهوية وإجراء الدفع في كل زيارة.
إذا سارت الأمور بشكل جيد، يمكن أن يسمح هذا النموذج لمحتوى الشبكة بالانتقال من "تحقيق الدخل من الإعلانات" إلى "تحقيق الدخل من ترخيص المحتوى"، مما يفتح مصادر دخل جديدة تمامًا. سواء كانت وسائل الإعلام الكبرى أو المدونات الصغيرة غير المعروفة، يمكن للجميع أن يمتلكوا قوة التفاوض في عصر الذكاء الاصطناعي، ويتم دفع ثمن استخدامهم من قبل الذكاء الاصطناعي.
لتأكيد أهميتها، وصف الرئيس التنفيذي لشركة Cloudflare اليوم الذي تم فيه إطلاق "الدفع مقابل الزحف" بأنه:
"يوم الاستقلال للمحتوى".
02
كيف يتم تحصيل "رسوم المرور" للذكاء الاصطناعي؟
بالطبع، الفكرة جميلة، لكن كيف يمكن تنفيذ التقنية؟
تأسست شركة Cloudflare من خلال تقديم خدمات مثل CDN، وحماية DDoS، وDNS، وأمان الثقة صفر، حيث قامت بنشر نقاط في أكثر من 300 مدينة حول العالم، وتحمل حوالي 20% من حركة مرور الويب، مما سهل لها العمل ك"وسيط".
"Pay Per Crawl" مبني على الطبقة الوسطى لشبكة CDN العالمية الخاصة به: يمكنه التعرف على زواحف الذكاء الاصطناعي ومعالجتها قبل أن تصل طلبات الوصول إلى المصدر. يمكن لمشرفي المواقع إعداد ثلاثة أوضاع في واجهة Cloudflare: السماح، الدفع، الحظر.
يمكن للمسؤول إعداد السماح أو الرسوم أو الحظر في الخلفية | مصدر الصورة: Cloudflare
تقوم جميع المواقع الجديدة المنضمة إلى Cloudflare بحظر زواحف الذكاء الاصطناعي افتراضيًا، ما لم يسمح بها مالك الموقع بشكل نشط. فقط الشركات العاملة في مجال الذكاء الاصطناعي التي أقامت شراكة مع Cloudflare يمكنها المشاركة في آلية الدفع، وإلا ستتعرض للحظر.
إذا حاولت زاحف AI إرسال طلب إلى عنوان URL مدفوع دون دفع، ستقوم Cloudflare بإرجاع رمز الحالة HTTP 402 Payment Required - وهو رمز حالة نادراً ما تم استخدامه في الماضي، مخصص لـ "الدفع عبر الإنترنت". يمكن لزاحف AI تضمين معلومات الدفع في الطلب للإشارة إلى موافقته على دفع السعر المحدد، وعند تطابق السعر يتم السماح بالطلب وإرجاع 200 OK، ويتم التسوية تلقائيًا.
Cloudflare هو "نقطة الدفع" لهذه المعاملة، ويتولى تجميع الفواتير وتوزيع العوائد.
سيقوم Cloudflare بإرجاع رمز حالة HTTP 402 الدفع مطلوب｜مصدر الصورة: Cloudflare
يمكن للزواحف تضمين معلومات الدفع في الطلبات | مصدر الصورة: Cloudflare
HTTP 200 OK استجابة تؤكد الرسوم｜مصدر الصورة: Cloudflare
الأهم من ذلك، أنه لا يمكن تجاوز ذلك عن طريق خداع بسيط لوكيل المستخدم. تتطلب Cloudflare من شركات الذكاء الاصطناعي تسجيل مفاتيح لضمان الهوية بتوقيع رقمي. وهذا أيضًا لمنع "العناكب المقلدة" من انتحال صفة المتوافقين لتجنب الدفع.
في الماضي، كان robots.txt هو ملف نصي بسيط موجود في الدليل الجذر للموقع، يستخدم لإخبار زواحف محركات البحث بأي الصفحات يمكن زحفها وأيها لا يمكن، لكنه كان مجرد "اقتراح مهذب" من الموقع، حيث تجاهلته العديد من زواحف الذكاء الاصطناعي. لقد غيرت خطة Cloudflare ذلك، وحولت "القيود اللينة" القائمة على robots.txt إلى "بوابات صلبة".
ومع ذلك، وفقًا لـ Cloudflare، فإن حوالي 37% فقط من أسماء النطاقات الـ 10000 الأولى تحتوي على ملف robots.txt.
إعداد مستويات لزحف AI | مصدر الصورة: Cloudflare
إذا كنت ترغب في المشاركة في سوق الدفع مقابل الزحف من Cloudflare، يجب على كل من الزاحف والجهة المستهدفة فتح حساب Cloudflare. حتى الآن، لا يزال "الدفع مقابل الزحف" في مرحلة الاختبار الداخلي، ويشارك فيه فقط بعض الناشرين الكبار مثل BuzzFeed و"The Atlantic" و"Fortune"، ولا تزال Cloudflare تبحث عن منشئي محتوى وزاحفين مهتمين.
"نتوقع أن يشهد نموذج الدفع حسب الاستخدام تطورًا ملحوظًا." كما صرحت Cloudflare.
على الرغم من أن الشركة لا تزال في المرحلة الأولية، إلا أن لديها العديد من الأفكار للمستقبل. على سبيل المثال، يمكن للناشرين أو الكيانات الأخرى فرض رسوم مختلفة حسب نوع المحتوى، أو اعتماد تسعير ديناميكي بناءً على عدد مستخدمي تطبيقات الذكاء الاصطناعي، أو إدخال استراتيجيات تسعير أكثر دقة بناءً على مجالات مثل التدريب، والاستدلال، والبحث.
يعتقدون أيضًا أن الإمكانات الحقيقية لبرامج الزحف المدفوعة حسب الاستخدام قد تظهر في عالم الوكلاء الذكيين.
"ماذا سيحدث إذا كان يمكن للجدران المدفوعة للوكيل الذكي أن تعمل بالكامل بطريقة برمجية؟ تخيل أنك تستطيع أن تطلب من مساعدك البحث العميق أن يساعدك في تجميع أحدث أبحاث السرطان، أو ملخصات قانونية، أو حتى مساعدتك في العثور على أفضل المطاعم - ثم تعطي هذا الوكيل الذكي ميزانية للحصول على أكثر المحتويات فائدة وذات صلة."
"الحل الأول القائم على رمز الاستجابة HTTP 402 سيفتح مستقبلًا يمكن فيه لوكلاء ذكيين التفاوض برمجيًا للوصول إلى الموارد الرقمية." حسب ما قالت Cloudflare.
03
تقاطع الإنترنت
من الناحية الاقتصادية، قد تكون هذه بداية "إعادة التفاوض على الأرباح" بين الذكاء الاصطناعي ومجتمع منشئي المحتوى.
الآن، فقط وسائل الإعلام الكبرى يمكنها التفاوض مع شركات الذكاء الاصطناعي (مثلما أفادت صحيفة نيويورك بأن OpenAI توصلت إلى تسوية)، بينما تم "سحب" الغالبية العظمى من المواقع الصغيرة والمتوسطة، والمنتديات، وحتى المؤلفين الأفراد دون أي قدرة على المقاومة، أو لنقل الوعي. في الواقع، يمكن أن يجعل حل Cloudflare هذه القدرة على التفاوض شائعة بين مجموعة أوسع من المواقع.
وفقًا لفريق Cloudflare، فقد أجروا مئات المحادثات مع وكالات الأنباء والناشرين ومنصات التواصل الاجتماعي الكبيرة، حيث اتفقوا جميعًا على "أنهم يرغبون في السماح لزواحف الذكاء الاصطناعي بالوصول إلى محتواهم، لكنهم يأملون في الحصول على تعويض."
بالنسبة للداعمين، فإن نموذج "Pay Per Crawl" يُعتبر بشكل مبدئي "عادلاً" للغاية: يحصل المبدعون على دخل، وتتجنب شركات الذكاء الاصطناعي المخاطر القانونية، وعلى المدى الطويل يمكن أن يُساعد ذلك في دفع الصناعة بأكملها نحو تراخيص محتوى أكثر توافقًا.
صورة المصدر: Cloudflare
بالطبع، قد لا تكون الشركات الذكية سعيدة، فبيانات الإنترنت لم تعد مجانية، وللحصول على محتوى جديد، يجب أن تُنفق الأموال، مما يعني أن هناك عوامل تكلفة بجانب القدرة الحاسوبية.
ولكن من ناحية أخرى، قد يعيق هذا أيضًا الاستيلاء العشوائي، ويجبر مطوري نماذج الذكاء الاصطناعي على أن يكونوا أكثر انتقائية في البيانات - مثل شراء محتوى عالي القيمة بشكل مستهدف، بدلاً من إطعام النموذج بمحتوى مختلف من جميع المواقع.
قال ماثيو برينس إن "محرك الذكاء الاصطناعي يشبه قطعة من الجبن السويسري، والمحتوى الأصلي الجديد الذي يمكنه حقًا سد الفجوات في هذه القطعة من الجبن، مثل المحتوى المتكرر ومنخفض القيمة الذي يحتل الآن معظم المساحة على الإنترنت، هو أكثر قيمة."
في رأيه، لم يكن من الممكن دائمًا قياس قيمة المحتوى بدقة من خلال حركة المرور، "إذا تمكنا من البدء في تقييم المحتوى وليس بناءً على مقدار الحركة التي يولدها، ولكن بناءً على مدى تعزيزه للمعرفة (بناءً على عدد الفجوات الموجودة في "الجبن السويسري" لمحركات الذكاء الاصطناعي التي يسدها) - ليس فقط يمكننا مساعدة محركات الذكاء الاصطناعي على التقدم بشكل أسرع، ولكن هناك احتمال أيضًا لتعزيز عصر جديد من إنشاء المحتوى عالي القيمة."
ومع ذلك، قد يتساءل دعاة الحقوق الرقمية: هل تستطيع فرق startups الصغيرة في مجال الذكاء الاصطناعي، والباحثون، والمجتمعات مفتوحة المصدر تحمل هذه التكاليف البيانية؟ هل ستواجه الأبحاث الأكاديمية، والأرشفة الخيرية، هذه "العناكب المفيدة" صعوبة في الوصول، مما يعني أنها ستتمكن فقط من الوصول إلى مصادر بيانات محدودة ومنخفضة القيمة؟
في واقع تتراجع فيه عائدات الإعلانات وترتفع فيه تكاليف المرور، كم عدد المواقع التي ستكون مستعدة لفتح أبوابها مجانًا لزواحف الذكاء الاصطناعي؟ هل ستصبح هذه بداية "إغلاق"، مما يؤدي إلى فقدان الإنترنت حريته وروح المشاركة؟
إذا كان من المفترض أن يتم حظر الرسوم عبر الشبكة بأكملها، فهل سيؤدي ذلك إلى زيادة "احتكار الشركات الكبرى" بشكل غير مقصود؟ إذ أن الشركات الكبرى لديها المزيد من المال.
نموذج "الدفع لكل زحف"، من جهة يحاول حل مشكلة استغلال المحتوى من قبل الذكاء الاصطناعي دون تقديم عائدات، ومن جهة أخرى، قد يؤدي عن غير قصد إلى رفع عائق الابتكار في الذكاء الاصطناعي، والعودة إلى القضية القديمة لحماية حقوق الطبع والنشر والانفتاح المعرفي.
بالطبع، Cloudflare يمنح المواقع مزيدًا من الاستقلالية. يمكن لمالكي المواقع اختيار الاستمرار في تقديم خدمات مجانية للمشاريع الخيرية وغير الربحية. القوة لا تزال بيد المبدعين. على أي حال، هم يستحقون "تعويض".
في كلام الرئيس التنفيذي لشركة Cloudflare، هدف هذه الثورة هو "بناء إنترنت أفضل". "نحن لا نعرف جميع الإجابات بعد، لكننا نتعاون مع بعض من أفضل الاقتصاديين وعلماء الكمبيوتر للبحث عن الإجابات."
حتى الآن، لم تعلن مقدمو خدمات CDN والأمان الآخرون (مثل Akamai و Fastly و Amazon CloudFront) عن ميزات مماثلة.
أوقف روبوت الزحف بالذكاء الاصطناعي عند الباب | مصدر الصورة: Cloudflare
على الرغم من أن "Pay Per Crawl" من Cloudflare يبدو وكأنه مجرد ميزة جديدة لمنتج CDN، إلا أنه من ناحية ما:
قد تكون إشارة إلى أن الإنترنت وصل إلى مفترق طرق.
في عصر البحث، يتم تحويل قيمة المحتوى إلى إيرادات إعلانات من خلال وصول المستخدمين. ولكن في عصر الذكاء الاصطناعي، قد لا يقوم المستخدمون حتى بزيارة المواقع - فجميع الإجابات ملخصة ومولدة داخل روبوتات الدردشة. هل يجب أن نسمح لنماذج الذكاء الاصطناعي الكبيرة بالتنقيب عن محتوى الويب مجانًا، أم يجب أن نعود إلى مبدأ "المعاملة بالمثل" في الحصول على البيانات، مما يضمن للمبدعين الحصول على التعويض المستحق؟ وكم يمكن أن يكون هذا التعويض؟
تجربة مبكرة هذه قد تمهد الطريق لنموذج الاقتصاد الرقمي الجديد لعصر الذكاء الاصطناعي، بغض النظر عن النجاح أو الفشل، فإن موقفها واضح: لا يمكن للذكاء الاصطناعي أن يستنفد صبر المبدعين إلى ما لا نهاية، ومن خلال اسم "الفتح" يحول عمل البشر إلى وقود مجاني.
"تحدث ثورة في الشبكة، وستتغير نماذج الأعمال معها. في هذه العملية، لدينا فرصة لتعلم الدروس الجيدة من الثلاثين عامًا الماضية لجعلها أفضل في المستقبل."
بالنسبة لما إذا كانت الأمور يمكن أن تتحسن حقًا، كما اعترفت Cloudflare بنفسها:
This page may contain third-party content, which is provided for information purposes only (not representations/warranties) and should not be considered as an endorsement of its views by Gate, nor as financial or professional advice. See Disclaimer for details.
"سايبور بوديسات" تبرز، وحقبة "وجبة الغداء المجانية" لعمالقة الذكاء الاصطناعي انتهت.
ماسك وترامب، هذا الثنائي في البيت الأبيض دخل مؤخرًا في مرحلة 2.0 من "حرب الكلمات". ومثل هذا الزوج من الأعداء السعداء، هناك صراع بين مجموعات الناشرين الأجانب وعمالقة الذكاء الاصطناعي - من جهة، هناك ناشرون كبار يريدون التعاون مع شركات الذكاء الاصطناعي، ومن جهة أخرى، هناك ناشرون عازمون على إفلاس عمالقة الذكاء الاصطناعي.
وفقًا للبيانات، فإن حركة مرور المواقع العالمية في انخفاض بعد ظهور البحث بالذكاء الاصطناعي وChatGPT؛ من ناحية أخرى، تتجاهل عمالقة الذكاء الاصطناعي "زواحف الذكاء الاصطناعي" بروتوكولات الزحف، مما يؤدي إلى تآكل بيانات جميع المواقع من خلال آلاف عمليات الزحف.
في هذه اللحظة، أخيرًا ظهرت شركة بنية تحتية، وأمسكت بيد صانعي المحتوى وقالت: "يمكننا أن نقول لا لعمالقة الذكاء الاصطناعي!"
كلودفلير، عملاق البنية التحتية للإنترنت الذي يتحكم في حوالي 20% من حركة المرور العالمية، والذي يُطلق عليه مستخدمو الإنترنت لقب "بوز" سايبري، أطلق في يوليو 2025 منتجًا تجريبيًا وسوقًا للتداول: "الدفع لكل زحف" - وضع قواعد جديدة للزواحف الذكية.
إما الحصول على ترخيص أو الدفع.
ببساطة، جوهر هذه الميزة هو إعطاء منشئي محتوى الموقع خيار "التبديل": يمكنهم اختيار السماح لزواحف الذكاء الاصطناعي بالوصول بحرية، مع فرض رسوم على كل عملية زحف، أو مباشرة حظر الوصول.
وفقًا لما قاله مؤسس Cloudflare، "المحتوى هو الوقود الذي يدفع محرك الذكاء الاصطناعي، لذلك من العادل أن يحصل منشئو المحتوى على مكافآت مباشرة."
بالنسبة لشركات الذكاء الاصطناعي، لا يمكنها الاستمرار في جمع محتوى الويب بالكامل لتدريب النماذج كما كانت تفعل سابقًا "تناول العشاء مجانًا". ولكن ذلك ليس بدون فوائد، لأنه من خلال الدفع مقابل المحتوى بسعر محدد، يمكن تجنب مشاكل حقوق الطبع والنشر.
هل يمكن لإجراءات "مكافحة الزواحف" التي اتخذتها Cloudflare أن تخفف من هجمات الزواحف الذكية العشوائية؟ والأهم من ذلك، هل يمكن لهذه الشركة أن تستفيد من موقعها الفريد لإنشاء نموذج جديد لتوزيع المحتوى وتحقيق الأرباح في عصر الذكاء الاصطناعي؟
01
الغداء المجاني" لعمالقة الذكاء الاصطناعي
على مدار العقود الماضية، كانت معظم صفحات الويب افتراضيًا "قابلة للزحف" عامة. محركات البحث مثل جوجل وBing تجلب حركة المرور إلى المواقع، ومع حركة المرور، يمكن للمواقع تحقيق الإيرادات من خلال الإعلانات أو بيع الاشتراكات - هذه هي الاتفاقية غير المرئية لعصر البحث.
في عصر الذكاء الاصطناعي، انخفض تدفق البحث التقليدي بشكل حاد، وكلما حسبت هذه الأرقام، زادت الخسائر.
تعتبر شركات الذكاء الاصطناعي محتوى الشبكة كوقود للتدريب، ومع ذلك نادراً ما تعطي معظم المبدعين تعويضاً. عندما يطرح المستخدمون أسئلة مباشرة في روبوتات الدردشة الذكية، غالباً ما تكون الإجابات مستندة إلى محتوى مُلخص، وليس إلى عشرات الروابط الزرقاء، مما لن يجلب المزيد من الحركة إلى المواقع.
حتى عمالقة البحث مثل جوجل يتغيرون، سابقاً كانوا يقدمون قوائم روابط المواقع، والآن أطلقوا "نظرة عامة على الذكاء الاصطناعي" في صفحة البحث، وفقاً لتقريرهم، 75% من مستخدمي الاستعلامات يحصلون على إجابات دون الحاجة للنقر على أي رابط.
تظهر أحدث البيانات من Cloudflare لشهر يوليو 2025: أن زاحف جوجل يجلب حوالي نقرة واحدة لكل 6 إلى 7 مرات زحف لموقع الويب، بينما يحتاج OpenAI إلى 1500 مرة للحصول على نقرة واحدة، ونسبة Anthropic أكثر مبالغة، حيث تصل إلى 73300 مرة للحصول على نقرة واحدة.
نسبة النقرات التي جلبتها كل مرة زحف AI من الشركات الكبرى لمواقع الويب | مصدر الصورة: Cloudflare
هذا يعني أن نموذج "تبادل المحتوى مقابل الزيارات" التقليدي قد فشل. بالمقارنة مع محركات البحث التقليدية، فإن عمالقة الذكاء الاصطناعي قد استولوا على كميات هائلة من محتوى المواقع دون تقديم "توجيه"، مما جعل بعض منتجي المحتوى يجدون صعوبة متزايدة في الاستمرار.
"مع وجود OpenAI، أصبح الحصول على حركة مرور الموقع أصعب 750 مرة مقارنة بعصر Google، ومع وجود Anthropic، أصبحت الصعوبة أكثر من 30,000 مرة. السبب بسيط: نحن نستهلك بشكل متزايد المنتجات المشتقة بدلاً من المحتوى الأصلي." قال ماتيو برينس، الرئيس التنفيذي لشركة Cloudflare، في منشور مدونة، "هذه ليست صفقة عادلة."
تواجه شركات الذكاء الاصطناعي أيضًا تكاليف في جمع البيانات، حيث تم اتهام عمالقة الذكاء الاصطناعي خلال العامين الماضيين بـ "سرقة المحتوى" لتدريب نماذجهم الكبيرة، مما أدى إلى موجة من دعاوى حقوق الطبع والنشر على مستوى العالم، خاصة بين نيويورك تايمز وغيرها من وكالات الأخبار وOpenAI.
روبوت زحف AI النشط من الشركات الكبرى｜مصدر الصورة: Cloudflare
لذلك، أطلقت Cloudflare "Pay Per Crawl"، لإنشاء سوق "الدفع لكل زحف"، الذي تهدف إلى حل هذه المشكلة.
صممت الشركة نظامًا للأذونات والدفع، يمكن للموقع في الخلفية اختيار "السماح، الحظر أو فرض رسوم" على زاحف AI، وإذا أراد زاحف AI سحب محتوى هذا الموقع، يجب عليه التسجيل والتحقق من الهوية وإجراء الدفع في كل زيارة.
إذا سارت الأمور بشكل جيد، يمكن أن يسمح هذا النموذج لمحتوى الشبكة بالانتقال من "تحقيق الدخل من الإعلانات" إلى "تحقيق الدخل من ترخيص المحتوى"، مما يفتح مصادر دخل جديدة تمامًا. سواء كانت وسائل الإعلام الكبرى أو المدونات الصغيرة غير المعروفة، يمكن للجميع أن يمتلكوا قوة التفاوض في عصر الذكاء الاصطناعي، ويتم دفع ثمن استخدامهم من قبل الذكاء الاصطناعي.
لتأكيد أهميتها، وصف الرئيس التنفيذي لشركة Cloudflare اليوم الذي تم فيه إطلاق "الدفع مقابل الزحف" بأنه:
"يوم الاستقلال للمحتوى".
02
كيف يتم تحصيل "رسوم المرور" للذكاء الاصطناعي؟
بالطبع، الفكرة جميلة، لكن كيف يمكن تنفيذ التقنية؟
تأسست شركة Cloudflare من خلال تقديم خدمات مثل CDN، وحماية DDoS، وDNS، وأمان الثقة صفر، حيث قامت بنشر نقاط في أكثر من 300 مدينة حول العالم، وتحمل حوالي 20% من حركة مرور الويب، مما سهل لها العمل ك"وسيط".
"Pay Per Crawl" مبني على الطبقة الوسطى لشبكة CDN العالمية الخاصة به: يمكنه التعرف على زواحف الذكاء الاصطناعي ومعالجتها قبل أن تصل طلبات الوصول إلى المصدر. يمكن لمشرفي المواقع إعداد ثلاثة أوضاع في واجهة Cloudflare: السماح، الدفع، الحظر.
يمكن للمسؤول إعداد السماح أو الرسوم أو الحظر في الخلفية | مصدر الصورة: Cloudflare
تقوم جميع المواقع الجديدة المنضمة إلى Cloudflare بحظر زواحف الذكاء الاصطناعي افتراضيًا، ما لم يسمح بها مالك الموقع بشكل نشط. فقط الشركات العاملة في مجال الذكاء الاصطناعي التي أقامت شراكة مع Cloudflare يمكنها المشاركة في آلية الدفع، وإلا ستتعرض للحظر.
إذا حاولت زاحف AI إرسال طلب إلى عنوان URL مدفوع دون دفع، ستقوم Cloudflare بإرجاع رمز الحالة HTTP 402 Payment Required - وهو رمز حالة نادراً ما تم استخدامه في الماضي، مخصص لـ "الدفع عبر الإنترنت". يمكن لزاحف AI تضمين معلومات الدفع في الطلب للإشارة إلى موافقته على دفع السعر المحدد، وعند تطابق السعر يتم السماح بالطلب وإرجاع 200 OK، ويتم التسوية تلقائيًا.
Cloudflare هو "نقطة الدفع" لهذه المعاملة، ويتولى تجميع الفواتير وتوزيع العوائد.
سيقوم Cloudflare بإرجاع رمز حالة HTTP 402 الدفع مطلوب｜مصدر الصورة: Cloudflare
يمكن للزواحف تضمين معلومات الدفع في الطلبات | مصدر الصورة: Cloudflare
HTTP 200 OK استجابة تؤكد الرسوم｜مصدر الصورة: Cloudflare
الأهم من ذلك، أنه لا يمكن تجاوز ذلك عن طريق خداع بسيط لوكيل المستخدم. تتطلب Cloudflare من شركات الذكاء الاصطناعي تسجيل مفاتيح لضمان الهوية بتوقيع رقمي. وهذا أيضًا لمنع "العناكب المقلدة" من انتحال صفة المتوافقين لتجنب الدفع.
في الماضي، كان robots.txt هو ملف نصي بسيط موجود في الدليل الجذر للموقع، يستخدم لإخبار زواحف محركات البحث بأي الصفحات يمكن زحفها وأيها لا يمكن، لكنه كان مجرد "اقتراح مهذب" من الموقع، حيث تجاهلته العديد من زواحف الذكاء الاصطناعي. لقد غيرت خطة Cloudflare ذلك، وحولت "القيود اللينة" القائمة على robots.txt إلى "بوابات صلبة".
ومع ذلك، وفقًا لـ Cloudflare، فإن حوالي 37% فقط من أسماء النطاقات الـ 10000 الأولى تحتوي على ملف robots.txt.
إعداد مستويات لزحف AI | مصدر الصورة: Cloudflare
إذا كنت ترغب في المشاركة في سوق الدفع مقابل الزحف من Cloudflare، يجب على كل من الزاحف والجهة المستهدفة فتح حساب Cloudflare. حتى الآن، لا يزال "الدفع مقابل الزحف" في مرحلة الاختبار الداخلي، ويشارك فيه فقط بعض الناشرين الكبار مثل BuzzFeed و"The Atlantic" و"Fortune"، ولا تزال Cloudflare تبحث عن منشئي محتوى وزاحفين مهتمين.
"نتوقع أن يشهد نموذج الدفع حسب الاستخدام تطورًا ملحوظًا." كما صرحت Cloudflare.
على الرغم من أن الشركة لا تزال في المرحلة الأولية، إلا أن لديها العديد من الأفكار للمستقبل. على سبيل المثال، يمكن للناشرين أو الكيانات الأخرى فرض رسوم مختلفة حسب نوع المحتوى، أو اعتماد تسعير ديناميكي بناءً على عدد مستخدمي تطبيقات الذكاء الاصطناعي، أو إدخال استراتيجيات تسعير أكثر دقة بناءً على مجالات مثل التدريب، والاستدلال، والبحث.
يعتقدون أيضًا أن الإمكانات الحقيقية لبرامج الزحف المدفوعة حسب الاستخدام قد تظهر في عالم الوكلاء الذكيين.
"ماذا سيحدث إذا كان يمكن للجدران المدفوعة للوكيل الذكي أن تعمل بالكامل بطريقة برمجية؟ تخيل أنك تستطيع أن تطلب من مساعدك البحث العميق أن يساعدك في تجميع أحدث أبحاث السرطان، أو ملخصات قانونية، أو حتى مساعدتك في العثور على أفضل المطاعم - ثم تعطي هذا الوكيل الذكي ميزانية للحصول على أكثر المحتويات فائدة وذات صلة."
"الحل الأول القائم على رمز الاستجابة HTTP 402 سيفتح مستقبلًا يمكن فيه لوكلاء ذكيين التفاوض برمجيًا للوصول إلى الموارد الرقمية." حسب ما قالت Cloudflare.
03
تقاطع الإنترنت
من الناحية الاقتصادية، قد تكون هذه بداية "إعادة التفاوض على الأرباح" بين الذكاء الاصطناعي ومجتمع منشئي المحتوى.
الآن، فقط وسائل الإعلام الكبرى يمكنها التفاوض مع شركات الذكاء الاصطناعي (مثلما أفادت صحيفة نيويورك بأن OpenAI توصلت إلى تسوية)، بينما تم "سحب" الغالبية العظمى من المواقع الصغيرة والمتوسطة، والمنتديات، وحتى المؤلفين الأفراد دون أي قدرة على المقاومة، أو لنقل الوعي. في الواقع، يمكن أن يجعل حل Cloudflare هذه القدرة على التفاوض شائعة بين مجموعة أوسع من المواقع.
وفقًا لفريق Cloudflare، فقد أجروا مئات المحادثات مع وكالات الأنباء والناشرين ومنصات التواصل الاجتماعي الكبيرة، حيث اتفقوا جميعًا على "أنهم يرغبون في السماح لزواحف الذكاء الاصطناعي بالوصول إلى محتواهم، لكنهم يأملون في الحصول على تعويض."
بالنسبة للداعمين، فإن نموذج "Pay Per Crawl" يُعتبر بشكل مبدئي "عادلاً" للغاية: يحصل المبدعون على دخل، وتتجنب شركات الذكاء الاصطناعي المخاطر القانونية، وعلى المدى الطويل يمكن أن يُساعد ذلك في دفع الصناعة بأكملها نحو تراخيص محتوى أكثر توافقًا.
صورة المصدر: Cloudflare
بالطبع، قد لا تكون الشركات الذكية سعيدة، فبيانات الإنترنت لم تعد مجانية، وللحصول على محتوى جديد، يجب أن تُنفق الأموال، مما يعني أن هناك عوامل تكلفة بجانب القدرة الحاسوبية.
ولكن من ناحية أخرى، قد يعيق هذا أيضًا الاستيلاء العشوائي، ويجبر مطوري نماذج الذكاء الاصطناعي على أن يكونوا أكثر انتقائية في البيانات - مثل شراء محتوى عالي القيمة بشكل مستهدف، بدلاً من إطعام النموذج بمحتوى مختلف من جميع المواقع.
قال ماثيو برينس إن "محرك الذكاء الاصطناعي يشبه قطعة من الجبن السويسري، والمحتوى الأصلي الجديد الذي يمكنه حقًا سد الفجوات في هذه القطعة من الجبن، مثل المحتوى المتكرر ومنخفض القيمة الذي يحتل الآن معظم المساحة على الإنترنت، هو أكثر قيمة."
في رأيه، لم يكن من الممكن دائمًا قياس قيمة المحتوى بدقة من خلال حركة المرور، "إذا تمكنا من البدء في تقييم المحتوى وليس بناءً على مقدار الحركة التي يولدها، ولكن بناءً على مدى تعزيزه للمعرفة (بناءً على عدد الفجوات الموجودة في "الجبن السويسري" لمحركات الذكاء الاصطناعي التي يسدها) - ليس فقط يمكننا مساعدة محركات الذكاء الاصطناعي على التقدم بشكل أسرع، ولكن هناك احتمال أيضًا لتعزيز عصر جديد من إنشاء المحتوى عالي القيمة."
ومع ذلك، قد يتساءل دعاة الحقوق الرقمية: هل تستطيع فرق startups الصغيرة في مجال الذكاء الاصطناعي، والباحثون، والمجتمعات مفتوحة المصدر تحمل هذه التكاليف البيانية؟ هل ستواجه الأبحاث الأكاديمية، والأرشفة الخيرية، هذه "العناكب المفيدة" صعوبة في الوصول، مما يعني أنها ستتمكن فقط من الوصول إلى مصادر بيانات محدودة ومنخفضة القيمة؟
في واقع تتراجع فيه عائدات الإعلانات وترتفع فيه تكاليف المرور، كم عدد المواقع التي ستكون مستعدة لفتح أبوابها مجانًا لزواحف الذكاء الاصطناعي؟ هل ستصبح هذه بداية "إغلاق"، مما يؤدي إلى فقدان الإنترنت حريته وروح المشاركة؟
إذا كان من المفترض أن يتم حظر الرسوم عبر الشبكة بأكملها، فهل سيؤدي ذلك إلى زيادة "احتكار الشركات الكبرى" بشكل غير مقصود؟ إذ أن الشركات الكبرى لديها المزيد من المال.
نموذج "الدفع لكل زحف"، من جهة يحاول حل مشكلة استغلال المحتوى من قبل الذكاء الاصطناعي دون تقديم عائدات، ومن جهة أخرى، قد يؤدي عن غير قصد إلى رفع عائق الابتكار في الذكاء الاصطناعي، والعودة إلى القضية القديمة لحماية حقوق الطبع والنشر والانفتاح المعرفي.
بالطبع، Cloudflare يمنح المواقع مزيدًا من الاستقلالية. يمكن لمالكي المواقع اختيار الاستمرار في تقديم خدمات مجانية للمشاريع الخيرية وغير الربحية. القوة لا تزال بيد المبدعين. على أي حال، هم يستحقون "تعويض".
في كلام الرئيس التنفيذي لشركة Cloudflare، هدف هذه الثورة هو "بناء إنترنت أفضل". "نحن لا نعرف جميع الإجابات بعد، لكننا نتعاون مع بعض من أفضل الاقتصاديين وعلماء الكمبيوتر للبحث عن الإجابات."
حتى الآن، لم تعلن مقدمو خدمات CDN والأمان الآخرون (مثل Akamai و Fastly و Amazon CloudFront) عن ميزات مماثلة.
أوقف روبوت الزحف بالذكاء الاصطناعي عند الباب | مصدر الصورة: Cloudflare
على الرغم من أن "Pay Per Crawl" من Cloudflare يبدو وكأنه مجرد ميزة جديدة لمنتج CDN، إلا أنه من ناحية ما:
قد تكون إشارة إلى أن الإنترنت وصل إلى مفترق طرق.
في عصر البحث، يتم تحويل قيمة المحتوى إلى إيرادات إعلانات من خلال وصول المستخدمين. ولكن في عصر الذكاء الاصطناعي، قد لا يقوم المستخدمون حتى بزيارة المواقع - فجميع الإجابات ملخصة ومولدة داخل روبوتات الدردشة. هل يجب أن نسمح لنماذج الذكاء الاصطناعي الكبيرة بالتنقيب عن محتوى الويب مجانًا، أم يجب أن نعود إلى مبدأ "المعاملة بالمثل" في الحصول على البيانات، مما يضمن للمبدعين الحصول على التعويض المستحق؟ وكم يمكن أن يكون هذا التعويض؟
تجربة مبكرة هذه قد تمهد الطريق لنموذج الاقتصاد الرقمي الجديد لعصر الذكاء الاصطناعي، بغض النظر عن النجاح أو الفشل، فإن موقفها واضح: لا يمكن للذكاء الاصطناعي أن يستنفد صبر المبدعين إلى ما لا نهاية، ومن خلال اسم "الفتح" يحول عمل البشر إلى وقود مجاني.
"تحدث ثورة في الشبكة، وستتغير نماذج الأعمال معها. في هذه العملية، لدينا فرصة لتعلم الدروس الجيدة من الثلاثين عامًا الماضية لجعلها أفضل في المستقبل."
بالنسبة لما إذا كانت الأمور يمكن أن تتحسن حقًا، كما اعترفت Cloudflare بنفسها:
« هذه مجرد بداية. »