أعلنت Google وOpenAI وMicrosoft دعمها لإشارة موحدة يمكن لأصحاب المواقع وضعها داخل ملف robots.txt لتحديد ما إذا كانوا يسمحون باستخدام محتواهم في تدريب نماذج الذكاء الاصطناعي التوليدي. وتستهدف الخطوة تقليل الحاجة إلى كتابة قواعد منفصلة لكل شركة، في وقت تتزايد فيه عمليات جمع المحتوى من المواقع بواسطة روبوتات الذكاء الاصطناعي.
جاءت الإعلانات في 30 أكتوبر 2026، ضمن عمل مجموعة تفضيلات الذكاء الاصطناعي في Internet Engineering Task Force (IETF). وكانت Anthropic قد تبنت الإشارة بالفعل، بينما قالت OpenAI إنها تستهدف تنفيذها خلال الأشهر المقبلة، وتخطط Google وMicrosoft لدعمها خلال 2027.
ما الإشارة الجديدة داخل robots.txt؟
تعتمد المسودة التقنية على رمز سياسة مشترك هو __usage_ai-training. ويمكن لصاحب الموقع استخدام مجموعة User-agent بهذا الرمز للتعبير عن تفضيله بشأن استخدام الصفحات في تدريب نماذج الذكاء الاصطناعي. ومن أمثلة منع استخدام محتوى الموقع بالكامل:
User-agent: __usage_ai-training
Disallow: /ويمكن تطبيق المنع على مسار محدد بدلًا من الموقع كله، مثل:
User-agent: __usage_ai-training
Disallow: /premium/الفكرة أن تتعرف الشركات المشاركة على الرمز المشترك بدل مطالبة الناشر بإضافة تعليمات منفصلة لكل روبوت تابع لها. وتظل القواعد الخاصة بكل شركة، مثل Google-Extended، متاحة إلى جانب الإشارة المشتركة؛ أي إن الرمز الجديد لا يلغي إعدادات التحكم الحالية.
متى ستبدأ الشركات في احترام الإشارة؟
تختلف المواعيد المعلنة بين الشركات. قالت Anthropic إنها تبنت الإشارة بالفعل. أما OpenAI فتقول إنها ستنفذها خلال الأشهر المقبلة وستنشر تفاصيل إضافية عند اكتمال التنفيذ. وتستهدف Google دعمها خلال 2027. وأعلنت Microsoft أيضًا دعم التفضيل المشترك، وحددت 1 فبراير 2027 موعدًا لبدء احترام إعدادات التدريب الجديدة أثناء إعادة الزحف إلى الصفحات.
وتضيف Microsoft طبقة منفصلة للتحكم في AI Grounding، أي استخدام محتوى الصفحة كمصدر للمعلومات عند توليد إجابة أو ملخص، وليس لتدريب أوزان النموذج. وتسمح إعداداتها الجديدة للناشر بالتحكم في التدريب والاستناد إلى المحتوى كلٌّ على حدة، مع التأكيد أن هذه التفضيلات لا تغير أهلية الظهور في نتائج بحث Bing التقليدية.
هل أصبحت الإشارة معيارًا رسميًا من IETF؟
لا. الوثيقة المنشورة حاليًا هي Internet-Draft أعدها Kevin Kelley، المسؤول عن المعايير في Anthropic، وتحمل رقم draft-kelley-aipref-training-preference-signal-00. وتوضح صفحة IETF صراحة أن المسودة لا تمثل اعتمادًا رسميًا من المنظمة، ولا تملك حتى الآن وضعًا رسميًا ضمن عملية المعايير، كما يمكن تحديثها أو استبدالها أو إلغاؤها قبل الوصول إلى معيار نهائي.
هناك نقطة تقنية مهمة أيضًا: رمز السياسة ليس أمرًا جديدًا لحظر الزحف بحد ذاته. فالمسودة تصفه بأنه إشارة تفضيل لا توجيه مباشر لسلوك الزاحف؛ ويمكن للجهة التي تتبناه أن تستخدم هذا التفضيل لتقرر عدم جلب الموارد لأغراض التدريب. لذلك تظل فعاليته مرتبطة بالتزام مزودي الذكاء الاصطناعي المشاركين واحترامهم للإشارة، ولا ينبغي اعتباره وسيلة تقنية مضمونة لمنع أي جهة من نسخ المحتوى.
ماذا يعني ذلك لأصحاب المواقع والناشرين؟
الميزة الأساسية هي تقليل تعقيد إدارة تفضيلات التدريب عبر عدة شركات. فبدل إضافة قاعدة مستقلة لكل مزود، يمكن للناشر استخدام إشارة مشتركة واحدة، مع الاحتفاظ بإمكانية تخصيص قواعد منفصلة عند الحاجة. لكن من المهم عدم الخلط بين منع التدريب ومنع الظهور في البحث أو منع استخدام الصفحة كمصدر لإجابة مولدة؛ فهذه استخدامات مختلفة، وقد تتطلب أدوات أو تفضيلات منفصلة.
بالنسبة للمواقع التي تعتمد على الزيارات القادمة من محركات البحث أو إجابات الذكاء الاصطناعي، فإن قرار السماح بالتدريب أو منعه يحتاج إلى موازنة بين حماية المحتوى وزيادة فرص اكتشافه والاستشهاد به. كما أن نشر الإشارة لا يعني تلقائيًا الحصول على مقابل مالي، ولا يضمن زيادة الزيارات أو ظهور المحتوى في إجابات النماذج.
الخلاصة: تمثل الإشارة المشتركة خطوة نحو لغة موحدة للتعبير عن تفضيلات الناشرين بشأن تدريب الذكاء الاصطناعي، لكنها ما زالت مسودة عمل وتبنيها يتم على مراحل. لذلك ينبغي متابعة مواعيد التنفيذ الفعلية لكل مزود، وعدم التعامل معها حتى الآن كحظر شامل وملزم لكل روبوتات الذكاء الاصطناعي.
المصادر
- Google Search Central: دعم إشارة مشتركة للتحكم في تدريب الذكاء الاصطناعي.
- OpenAI: تسهيل التعبير عن تفضيلات المواقع بشأن تدريب الذكاء الاصطناعي.
- Microsoft Bing: تفضيلات مستقلة للتدريب والاستناد إلى المحتوى.
- مسودة IETF: Machine-Readable Training Preference Signal.
- The Verge: دعم شركات الذكاء الاصطناعي لإشارة موحدة لإيقاف التدريب على محتوى المواقع.
اكتشاف المزيد من lightweb2
اشترك للحصول على أحدث التدوينات المرسلة إلى بريدك الإلكتروني.
