زحف الذكاء الاصطناعي يختبر صفقة الويب القديمة

طوال سنوات، قامت شبكة الويب على صفقة غير مكتوبة: تسمح المواقع لمحركات البحث بقراءة صفحاتها وفهرستها، وفي المقابل تعيد محركات البحث جزءا من الجمهور إلى تلك المواقع. لم تكن الصفقة مثالية دائما، لكنها كانت مفهومة. الموقع يقدم محتوى، ومحرك البحث يساعد الناس على الوصول إليه، والزيارة تتحول إلى إعلان أو اشتراك أو قارئ وفي.

في 10 يوليو 2026 تبدو هذه الصفقة أقل وضوحا. البيانات المنشورة هذا الأسبوع عن حركة روبوتات الذكاء الاصطناعي خلال الفترة من 1 إلى 7 يوليو أظهرت فجوة كبيرة بين عدد الصفحات التي تزحف إليها بعض الشركات وبين عدد الزيارات التي تعيدها إلى أصحاب المحتوى. إحدى الشركات سجلت ما يقارب 2800 صفحة مزحوفة مقابل كل زيارة واحدة ترسلها إلى المواقع. الرقم تحسن عن فترات سابقة، لكنه ما يزال كافيا لطرح سؤال جوهري: ماذا يحدث عندما تقرأ الآلات الويب أكثر مما يزوره البشر؟

المشكلة ليست في الزحف وحده

الزحف بحد ذاته ليس أمرا جديدا. كل موقع عام تقريبا يتعامل مع روبوتات البحث، وأدوات الأرشفة، ومراقبة الأداء، وخدمات الأمان. الجديد أن روبوتات الذكاء الاصطناعي لا تكتفي غالبا بدور “الفهرس” الذي يقود المستخدم إلى المصدر، بل تدخل ضمن سلسلة تنتج إجابة مباشرة داخل مساعد أو محرك إجابات أو أداة بحث ذكية. المستخدم يحصل على الخلاصة في مكان آخر، وقد لا يضغط على الرابط الأصلي أصلا.

هذا يغير معنى الزيارة. في النموذج القديم، كانت قراءة الصفحة من قبل الروبوت استثمارا صغيرا في زيارة مستقبلية. في النموذج الجديد، قد تصبح القراءة استهلاكا كاملا للمعلومة من دون عودة واضحة للمصدر. لذلك لم يعد السؤال: هل يسمح الموقع للروبوتات أم يمنعها؟ السؤال الأدق: أي نوع من الروبوتات؟ لأي غرض؟ وبأي مقابل أو فائدة؟

لماذا يهم ذلك المواقع الصغيرة؟

المواقع الكبيرة تملك فرقا قانونية وتقنية، وتستطيع التفاوض أو بناء جدران حماية أو تجربة نماذج ترخيص. أما المواقع الصغيرة والمدونات المستقلة والمجلات المتخصصة فتعيش غالبا على هامش أضيق. زيادة الطلب الآلي قد ترفع تكاليف الاستضافة، بينما انخفاض الإحالات يقلل فرص الإعلان والاشتراك وبناء الجمهور.

المفارقة أن المحتوى المتخصص عالي الجودة هو بالضبط ما تحتاجه أنظمة الذكاء الاصطناعي كي تقدم إجابات أفضل. لكن إذا لم يحصل صانع هذا المحتوى على جمهور أو عائد أو اعتراف واضح، تصبح الحوافز معكوسة: لماذا يدفع محرر أو مطور أو باحث وقتا طويلا لكتابة شرح أصلي إذا كان أقصى ما سيحدث أن يتحول إلى وقود لإجابة لا تعيد القارئ إليه؟

المستخدم أيضا طرف في القصة

قد يبدو الموضوع وكأنه صراع بين شركات بنية تحتية وناشرين وشركات ذكاء اصطناعي، لكنه يؤثر على المستخدم العادي أيضا. عندما تضعف المواقع الأصلية، تضعف جودة المعرفة المتاحة للجميع. الإجابات السريعة مفيدة، لكنها تحتاج إلى مصادر حية يتم تحديثها وتصحيحها ومراجعتها. إذا تراجعت هذه المصادر، ستبدأ الإجابات نفسها في الدوران حول محتوى أقدم وأفقر وأقل تنوعا.

هناك جانب آخر: الثقة. عندما يقرأ المستخدم إجابة مختصرة داخل أداة ذكاء اصطناعي، لا يرى دائما كيف وصلت الأداة إلى النتيجة، ولا يعرف إن كان المصدر حديثا أو موثوقا أو منسوخا من سياق مختلف. لذلك يصبح وجود روابط واضحة وإحالات عادلة ليس مسألة مجاملة للناشرين فقط، بل جزءا من صحة المعلومات على الويب.

ماذا يستطيع أصحاب المواقع فعله الآن؟

لا توجد وصفة واحدة تناسب الجميع، لكن هناك خطوات عملية يمكن البدء بها. أولها مراقبة السجلات لمعرفة من يزور الموقع فعلا: هل الارتفاع في الحركة قادم من قراء أم من روبوتات؟ وهل هذه الروبوتات ترسل إحالات لاحقا أم تستهلك الصفحات فقط؟

الخطوة الثانية هي مراجعة ملفات وسياسات الزحف مثل robots.txt، مع إدراك أنها ليست عصا سحرية. بعض الروبوتات تلتزم، وبعضها لا يلتزم، وبعض الوكلاء الجدد يتصرفون بطريقة أقرب إلى المتصفح البشري. لذلك يحتاج الموقع إلى طبقات أوسع: حدود طلبات، مراقبة السلوك، حماية الصفحات المكلفة، وتحديد واضح لما يسمح به للبحث التقليدي وما لا يسمح به للتدريب أو التلخيص التجاري.

أما الخطوة الثالثة فهي التفكير في المحتوى نفسه. الصفحات التي تقدم قيمة أصلية يجب أن تحتوي على إشارات واضحة للملكية والتاريخ والتحديثات، وأن تكون سهلة الاقتباس العادل لا سهلة النسخ العشوائي. الويب المفتوح لا يعني أن يصبح كل شيء بلا سياق أو مقابل.

هل نحتاج إلى حظر شامل؟

الحظر الشامل يبدو مغريا، لكنه ليس دائما القرار الأفضل. بعض روبوتات البحث والذكاء الاصطناعي قد تجلب جمهورا حقيقيا أو تساعد في اكتشاف المحتوى. المشكلة ليست في وجود الروبوت، بل في غياب التوازن. إذا كان الروبوت يقرأ آلاف الصفحات ولا يعيد أي قراء تقريبا، فهذه علاقة مختلفة عن روبوت يفهرس ويرسل زيارات واضحة.

الأفضل أن ننتقل من منطق “السماح أو المنع” إلى منطق أكثر دقة: السماح للبحث، التقييد للتدريب، طلب ترخيص للاستخدام التجاري الكثيف، ومراقبة مستمرة للأثر. هذا التحول سيصبح جزءا من إدارة أي موقع جاد، كما أصبحت شهادات HTTPS والنسخ الاحتياطي وتحليلات الأداء أمورا أساسية.

خلاصة Scarecrow

زحف الذكاء الاصطناعي ليس تفصيلا تقنيا عابرا. إنه اختبار جديد للعقد الاجتماعي الذي جعل الويب مفيدا: من يكتب، من يقرأ، من يربح، ومن يتحمل تكلفة البنية التحتية. إذا استمرت الآلات في أخذ المعرفة من المواقع من دون أن تعيد إليها جمهورا أو قيمة، سنحصل على ويب أقل تنوعا وأقل قدرة على إنتاج محتوى جديد.

الطريق الأفضل ليس حربا ضد الذكاء الاصطناعي، بل قواعد أوضح. على الشركات أن تشرح كيف تستخدم المحتوى، وعلى المواقع أن تقيس وتقرر بوعي، وعلى المستخدمين أن يتذكروا أن الإجابة السريعة ليست بديلا دائما عن المصدر الأصلي. الويب الجيد لا يعيش بالزحف فقط؛ يعيش بالثقة، والزيارات، والحوافز التي تجعل البشر يستمرون في الكتابة.