Cloudflare تستبدل الحظر الشامل لروبوتات الذكاء الاصطناعي بضوابط دقيقة لروبوتات البحث والتدريب والوكيل

Cloudflare تجدد إدارة روبوتات الذكاء الاصطناعي

أعلنت Cloudflare عن تحول كبير في كيفية إدارة أصحاب المواقع لحركة روبوتات الذكاء الاصطناعي. منذ يوليو 2024، تمكن عملاء Cloudflare من حظر جميع روبوتات الذكاء الاصطناعي بنقرة واحدة. الآن، بدلاً من الحظر الشامل، يمكن لأصحاب المواقع الاختيار بين ثلاث فئات: البحث والتدريب والوكيل. يوفر هذا التغيير تحكمًا أكثر دقة في كيفية تفاعل روبوتات الذكاء الاصطناعي مع المواقع.

ضوابط دقيقة جديدة

تسمح ضوابط روبوتات الذكاء الاصطناعي الجديدة في لوحة تحكم Cloudflare لأصحاب المواقع بإدارة الوصول لروبوتات البحث والتدريب والوكيل بشكل منفصل. تغطي روبوتات البحث فهرسة محركات البحث، بينما تغطي روبوتات التدريب جمع البيانات لتدريب نماذج الذكاء الاصطناعي، وتغطي روبوتات الوكيل الروبوتات التي تعمل نيابة عن المستخدمين، مثل ChatGPT. اعتبارًا من 15 سبتمبر 2026، سيتم حظر روبوتات التدريب والوكيل افتراضيًا على الصفحات التي تحمل إعلانات، لأن الإعلانات تشير إلى أن الموقع يريد زوارًا بشريين. سيظل مسموحًا بروبوتات البحث. سيتم التعامل مع الروبوتات متعددة الأغراض مثل Googlebot التي تقوم بالبحث والتدريب وفقًا للقاعدة الأكثر صرامة. الخيارات الجديدة متاحة أيضًا للمستخدمين في الخطة المجانية.

تشجيع مشغلي الروبوتات على فصل الروبوتات

تضغط Cloudflare على مشغلي الروبوتات لفصل روبوتاتهم حسب الغرض. كان الرئيس التنفيذي لـ Cloudflare، Matthew Prince، قد انتقد سابقًا Google لدمج روبوت البحث الخاص بها مع روبوت الذكاء الاصطناعي. في يونيو 2026، أشار Prince إلى أن حركة الروبوتات تجاوزت حركة البشر على الإنترنت لأول مرة، وهو إنجاز لم يتوقعه في الأصل حتى أواخر 2027.

BotBase: قاعدة بيانات روبوتات للمؤسسات

بالنسبة لعملاء المؤسسات، تطلق Cloudflare أيضًا BotBase، وهي قاعدة بيانات قابلة للبحث لجميع الروبوتات المعروفة مدمجة في لوحة التحكم. تظهر كيف يتم تصنيف كل روبوت وكيف يستخدم المحتوى، سواء كان يربط فقط بالصفحات أو يعيد إنتاجها بالكامل. تغير Cloudflare أيضًا قواعد الروبوتات الموثقة. سابقًا، كان يُسمح لجميع الروبوتات الموثقة بالمرور تلقائيًا. في المستقبل، ستحدد فئة الروبوت ما إذا كان سيحصل على الوصول. لن يكون تصنيف 'موثق' وحده كافيًا بعد الآن: سيحتاج مشغلو الروبوتات إلى إثبات أنهم يعرفون عن أنفسهم بصدق ولا يسيئون استخدام الوصول الممنوح لهم.

الآثار المترتبة على أصحاب المواقع

يمنح هذا التحديث أصحاب المواقع مرونة أكبر في إدارة حركة روبوتات الذكاء الاصطناعي. من خلال فصل الروبوتات إلى فئات، يمكن لأصحاب المواقع السماح بفهرسة البحث مع حظر روبوتات التدريب والوكيل على الصفحات المدعومة بالإعلانات. يساعد هذا في حماية المحتوى من الاستخدام في تدريب الذكاء الاصطناعي دون إذن مع السماح لمحركات البحث بفهرسة الموقع. يمثل الحظر الافتراضي لروبوتات التدريب والوكيل على الصفحات المدعومة بالإعلانات تغييرًا كبيرًا يتماشى مع مصالح الناشرين الذين يعتمدون على عائدات الإعلانات.

التأثير على شركات الذكاء الاصطناعي

ستحتاج شركات الذكاء الاصطناعي التي تستخدم الروبوتات للتدريب أو مهام الوكيل إلى التكيف مع هذه الضوابط الجديدة. قد تحتاج إلى فصل روبوتاتها إلى روبوتات منفصلة لأغراض مختلفة للامتثال لتفضيلات أصحاب المواقع. كما أن خطوة Cloudflare تضغط على مزودي البنية التحتية للإنترنت الآخرين لتقديم ضوابط دقيقة مماثلة.

الخلاصة

تمثل ضوابط روبوتات الذكاء الاصطناعي الجديدة من Cloudflare خطوة كبيرة إلى الأمام في منح أصحاب المواقع سيطرة أكبر على كيفية استخدام المحتوى الخاص بهم بواسطة الذكاء الاصطناعي. من خلال توفير خيارات دقيقة وحظر افتراضي لروبوتات التدريب والوكيل على الصفحات المدعومة بالإعلانات، تساعد Cloudflare في تحقيق توازن بين احتياجات منشئي المحتوى ومطوري الذكاء الاصطناعي. يعزز إطلاق BotBase لعملاء المؤسسات الشفافية والتحكم بشكل أكبر.

هذا المقال مبني على تقارير من The Decoder. اقرأ المقال الأصلي.