أعلنت شركة OpenAI يوم الخميس أنها ستحترم الإشارة المشتركة في ملف robots.txt، وهو الملف الذي تستخدمه مواقع الويب لتوصيل كيفية الوصول إلى محتواها، بحيث يمكن لمشغلي الموقع التعبير عن تفضيل تدريب واحد للذكاء الاصطناعي لمقدمي خدمات متعددين في وقت واحد بدلاً من الحفاظ على قواعد منفصلة لكل زاحف. وتدعم جوجل ومايكروسوفت أيضًا هذه الجهود، وفقًا لتقرير The Verge، حيث توثق المائدة المستديرة لمحرك البحث إعلانات التبني من كلا الشركتين في نفس اليوم.

تعالج هذه الخطوة نقطة الألم التي طال أمدها بالنسبة للناشرين. حتى الآن، كان على موقع الويب الذي يريد إبقاء محتواه خارج مسارات تدريب الذكاء الاصطناعي تحديد كل زاحف للذكاء الاصطناعي على حدة وكتابة قواعد منفصلة لكل مزود، ثم إبقاء هذه القائمة محدثة مع ظهور برامج زحف جديدة. تعمل الإشارة المشتركة على تحويل عبء الصيانة إلى خط واحد من النوايا، والذي توافق الشركات المشاركة على احترامه. لمزيد من السياق حول هذه القصة، راجع أحدث تطورات الذكاء الاصطناعي.

ما تلتزم به شركة OpenAI

وفي إعلانها، وصفت OpenAI الجهد بأنه طوعي وقالت إنها تهدف إلى تنفيذ الإشارة في الأشهر المقبلة، مع متابعة تفاصيل التنفيذ في تحديث لاحق، وفقًا لحساب Unite.AI للإعلان. وقالت الشركة إن الإشارة الجديدة لن تحل محل عناصر التحكم التي توفرها بالفعل من خلال ملف robots.txt، والتي ستستمر في تطبيقها واحترامها.

قامت OpenAI بإطار العمل على أنه يعتمد على الجهود المستمرة التي تبذلها مجموعة عمل تفضيلات الذكاء الاصطناعي التابعة لفريق عمل هندسة الإنترنت، وهي جهود هيئة المعايير التي تعمل على تحديد كيف يمكن لمواقع الويب التعبير عن التفضيلات التي يمكن قراءتها آليًا حول كيفية استخدام محتواها في أنظمة الذكاء الاصطناعي. وقالت الشركة إنها تنضم إلى المشاركين الآخرين في مجموعة العمل في إصدار هذا الإعلان وشجعت موفري الذكاء الاصطناعي الآخرين على احترام الإشارة أيضًا.

جوجل ومايكروسوفت تسجيل الدخول

وتعتمد أهمية الإعلان بشكل كبير على من يتبنى هذا المعيار، والعلامات المبكرة تشير إلى مشاركة أكبر اللاعبين. وأفادت منظمة Search Engine Roundtable يوم الخميس أن جوجل قد اعتمدت التحكم الجديد في تدريب الذكاء الاصطناعي، وغطت بشكل منفصل إعلان Microsoft Bing عن ضوابط تدريب الذكاء الاصطناعي الجديدة المرتبطة بمنتجاتها الأساسية للبحث في الذكاء الاصطناعي. ذكرت The Verge أن OpenAI وGoogle وMicrosoft يدعمون المعيار الجديد لمواقع الويب، مما يجعله أول اتفاقية عبر الصناعة من نوعها تدعمها الشركات التي تمثل برامج الزحف الخاصة بها الجزء الأكبر من عمليات الجلب المتعلقة بالذكاء الاصطناعي.

إذا تابعت الشركات الثلاث ذلك، فسيكون مشغل موقع الويب قادرًا على تعيين إلغاء اشتراك تدريبي واحد تفهمه برامج الزحف وراء ChatGPT ومنتجات الذكاء الاصطناعي من Google والنظام البيئي Copilot من Microsoft في وقت واحد. يعد هذا عالمًا أبسط ماديًا للناشرين من العالم الحالي، حيث يقوم كل مزود بتوثيق أسماء الزاحف الخاصة به ورموز التفضيلات الخاصة به.

لماذا أراد الناشرون ذلك

لقد كان الضغط من أجل إشارة موحدة يتزايد منذ سنوات حيث أصبح التدريب على الذكاء الاصطناعي نقطة اشتعال بين صناعة التكنولوجيا والأشخاص الذين ينتجون السجل المكتوب الذي تتعلم منه النماذج. وقد اشتكت المؤسسات الإخبارية، على وجه الخصوص، من أن برامج زحف الذكاء الاصطناعي تتخلص من تقاريرها على نطاق واسع في حين تتآكل نماذج أعمالها الممولة بالإعلانات، وقد ذهب العديد من الناشرين إلى المحكمة أو وقعوا على صفقات ترخيص لاستعادة نفوذهم.

لقد تكاثرت الحلول المؤقتة. أطلقت Cloudflare، التي تقع أمام جزء كبير من الويب، إعدادًا يتيح للمواقع حظر برامج زحف تدريب الذكاء الاصطناعي دون فقدان إمكانية رؤية بحث Google، وهو تمييز مهم لأن زحف الذكاء الاصطناعي وفهرسة البحث كانا يخضعان تاريخيًا لنفس قواعد ملف robots.txt. تهدف المعايير التي تعمل داخل مجموعة عمل تفضيلات الذكاء الاصطناعي التابعة لـ IETF إلى إضفاء الطابع الرسمي على تعبير التفضيلات على مستوى البروتوكول.

وستكون الإشارة المشتركة التي يتبناها مقدمو خدمات الذكاء الاصطناعي الرئيسيون هي الخطوة الأكثر أهمية حتى الآن، لأنها تعمل من خلال آلية ملف robots.txt الحالية التي يعرف مشغلو الموقع بالفعل كيفية استخدامها.

سؤال التنفيذ

المعيار طوعي، وهذه الكلمة لها وزنها. إن تفضيل ملف robots.txt ليس له قوة القانون في حد ذاته؛ فهو يُلزم فقط الشركات التي توافق على احترامه، وقد اعتمد الامتثال تاريخيًا على اكتشاف كل مزود وتنفيذه. يشير بيان OpenAI بأن ضوابط ملف robots.txt الحالية الخاصة بها سيستمر احترامها إلى الاستمرارية وليس إلى نظام جديد، ولم تنشر الشركة بعد التفاصيل الفنية حول كيفية تنفيذ الامتثال أو تدقيقه.

هناك أيضًا أسئلة مفتوحة لم يحسمها الإعلان. ويبقى أن نرى ما إذا كانت الإشارة تغطي التدريب فقط، أو تمتد إلى الاسترجاع والتأريض، وهي العمليات التي تجلب أنظمة الذكاء الاصطناعي من خلالها محتوى الويب المباشر للإجابة على الأسئلة. هذا التمييز مهم للناشرين لأن المنتجات القائمة على الاسترجاع يمكن أن تعيد حركة المرور إلى المصادر، في حين أن استخدام التدريب لا يفعل ذلك. إن الطريقة التي تتعامل بها تجارب الذكاء الاصطناعي التي يديرها محرك البحث مع الإشارة مقابل قواعد الزحف العامة الخاصة بها ستحدد ما إذا كان الناشرون يعتبرون التبني بمثابة فوز أم ورقة توت.

ما يجب مشاهدته

المعالم التالية ملموسة: تحديث تنفيذ OpenAI، والمواصفات الفنية التي تنشرها الشركات المشاركة، وما إذا كان مقدمو الذكاء الاصطناعي المهمون الآخرون - بما في ذلك المختبرات الصينية الكبيرة وشركات الاستدلال المستقلة - يعلنون عن الدعم. سوف يراقب الناشرون وأصحاب الحقوق عن كثب قصة التدقيق، أي ما إذا كان بإمكان المشغلين التحقق من أن تفضيلاتهم يتم احترامها بالفعل على نطاق واسع.

إذا استمر هذا المعيار، فقد يتم تذكر إعلان يوم الخميس باعتباره اللحظة التي توقف فيها إلغاء الاشتراك في تدريب الذكاء الاصطناعي عن كونه خليطًا لكل شركة وأصبح اتفاقية على مستوى الويب. وإذا توقفت، فإنها تنضم إلى سلسلة طويلة من معايير الويب الطوعية التي أشادت بها الصناعة ثم تجاهلتها بهدوء.

---

ابق على اطلاع بأخبار الذكاء الاصطناعي

آخر أخبار وتحليلات وإنجازات الذكاء الاصطناعي — في مكان واحد.

اقرأ المزيد من أخبار الذكاء الاصطناعي →