معيار جديد لرفض سحب المحتوى لتدريب الذكاء الاصطناعي
أكبر شركات الذكاء الاصطناعي تتبنى معياراً موحداً يسمح للناشرين بالتحكم في استخدام محتواهم لتدريب النماذج، عبر إشارة واحدة في ملف robots.txt.
ما هو المعيار الجديد لرفض سحب المحتوى؟
أعلنت شركات كبرى في مجال الذكاء الاصطناعي، مثل OpenAI و Google و Microsoft و Anthropic، عن تبنيها لمعيار جديد يسمح للناشرين برفض سحب محتواهم من قبل نماذج الذكاء الاصطناعي. هذا المعيار يتيح للناشرين تطبيق تفضيلاتهم بشأن تدريب الذكاء الاصطناعي على عدة شركات في وقت واحد، بدلاً من تحديدها لكل شركة على حدة.
المعيار الجديد، الذي اقترحه كيفن كيلي، القائد التقني للمعايير في شركة Anthropic، هو جزء من عمل فريق مهام هندسة الإنترنت (IETF). يعتمد هذا المعيار على إشارة موحدة تسمى "policy token" توضع داخل ملف robots.txt الخاص بالموقع. هذا الملف يستخدم منذ زمن طويل لتحديد أي برامج زحف الويب يمكنها سحب المحتوى وأيها لا يمكنها ذلك، سواء لأغراض الفهرسة في محركات البحث أو الأرشفة أو تدريب الذكاء الاصطناعي.
تعهدت شركات OpenAI و Google و Microsoft و Anthropic بتقييد برامج الزحف الخاصة بها من الوصول إلى المواقع التي تحتوي على هذه الإشارة الموحدة. وأشار آندي ستون، رئيس قسم الاتصالات في Meta، إلى دعم شركته للإعداد الجديد، لكنه لم يذكر ما إذا كانت الشركة ستلتزم به. وقد أعرب عن تطلعهم للعمل مع شركات الذكاء الاصطناعي الأخرى على المعايير وتطبيقها في الصناعة.
من جانبها، أوضحت Microsoft أنها ستوفر خيارات تحكم دقيقة، تمنح الناشرين القدرة على رفض استخدام محتواهم لتدريب الذكاء الاصطناعي أو لعملية "AI grounding"، وهي عملية توجيه نموذج الذكاء الاصطناعي إلى مصدر معلومات موثوق لتقليل "الهلوسات" (hallucinations). وتؤكد Microsoft أن المواقع ستظل تظهر في نتائج بحث Bing بغض النظر عن تفضيلاتها. كما أن Google نفذت سابقاً ضوابط مماثلة تسمح للمواقع بالتحكم فيما إذا كان محتواها يظهر في ميزات البحث المدعومة بالذكاء الاصطناعي أو يستخدم لتدريب الذكاء الاصطناعي، دون التأثير على ظهورها في نتائج البحث العادية. وقد بدأت Anthropic بالفعل في تطبيق هذه الإشارة، بينما تخطط Google و Microsoft لدعمها العام القادم، وستقوم OpenAI بتطبيقها في "الأشهر القادمة".
لماذا نحتاج إلى معيار موحد للتحكم في سحب المحتوى؟
يأتي هذا الإعلان في وقت يواجه فيه الناشرون تحديات مستمرة بسبب تدفق برامج زحف الذكاء الاصطناعي التي تقوم بسحب محتواهم وتغذية نماذج الذكاء الاصطناعي به. هذا هو التحدي الذي يواجهه الكثيرون.
في السابق، كان على أصحاب المواقع تحديد تفضيلاتهم لتدريب الذكاء الاصطناعي بشكل منفصل لكل شركة من شركات الذكاء الاصطناعي. هذا كان يتطلب جهداً كبيراً وتنسيقاً معقداً. بعض الشركات والمنظمات حاولت مكافحة السحب غير المصرح به، مثل معيار Really Simple Licensing (RSL) الذي يمنح الناشرين القدرة على فرض رسوم على برامج الزحف، و Cloudflare التي تقوم بحظر برامج زحف الذكاء الاصطناعي افتراضياً.
المعيار الجديد يهدف إلى تبسيط هذه العملية، وتوفير طريقة موحدة وفعالة للناشرين لحماية محتواهم، مع الحفاظ على ظهورهم في نتائج البحث التقليدية. إنه خطوة نحو منح أصحاب المحتوى مزيداً من السيطرة.
من يستفيد من هذا المعيار؟ وماذا يعني للناشرين؟
هذا المعيار الجديد يمثل خطوة مهمة نحو تمكين الناشرين وأصحاب المحتوى على الإنترنت. الآن، يمكن للناشرين تحديد بوضوح ما إذا كانوا يرغبون في أن يُستخدم محتواهم لتدريب نماذج الذكاء الاصطناعي أم لا، وذلك عبر إشارة واحدة فقط.
الاستفادة الكبرى هنا هي في توحيد الجهود. بدلاً من التعامل مع كل شركة ذكاء اصطناعي على حدة، ستتمكن من تطبيق تفضيلاتك مرة واحدة، مما يوفر الوقت والجهد. هذا يعني سيطرة أكبر على ملكيتك الفكرية وحماية أفضل لمحتواك الإبداعي.
بالنسبة لشركات الذكاء الاصطناعي، فإن تبني هذا المعيار يعكس التزامها باحترام حقوق الناشرين وتوفير آليات واضحة للتحكم. هذا يساعد في بناء الثقة بين أصحاب المحتوى ومطوري الذكاء الاصطناعي، ويقلل من المخاوف المتعلقة بالاستخدام غير المصرح به للمحتوى.
في النهاية، هذا التطور يهدف إلى إيجاد توازن بين الحاجة إلى تدريب نماذج الذكاء الاصطناعي بكميات هائلة من البيانات، وبين حقوق الناشرين في التحكم بمحتواهم. إنها خطوة نحو مستقبل رقمي أكثر عدلاً وشفافية للجميع.
ماذا يعني هذا لك؟
- إذا كنت ناشراً لمحتوى على الإنترنت، يمكنك الآن التخطيط لاستخدام إشارة "policy token" في ملف robots.txt الخاص بموقعك للتحكم في استخدام محتواك لتدريب الذكاء الاصطناعي.
- راقب إعلانات Google و Microsoft و OpenAI في العام القادم والأشهر القادمة لتفعيل هذه الميزة، حيث تخطط هذه الشركات لدعمها.
- تأكد أن استخدام هذا المعيار لن يؤثر على ظهور موقعك في نتائج البحث التقليدية لـ Bing أو Google.
- فكر في تفضيلاتك: هل تريد السماح بتدريب الذكاء الاصطناعي على محتواك أم لا؟ هذا المعيار يمنحك الخيار.

