نشرت OpenAI يوم الأربعاء إطارًا جديدًا للتتبع والتحقيق والكشف عن اختلال النموذج، وأصدرت ستة تقارير حوادث بجانبه تصف سلوكًا غير متوقع أو مقلقًا لوحظ في نماذجها على مدار الأشهر الستة الماضية - بدءًا من تعليمات إخفاء الأخطاء، إلى قيام الوكلاء بتبادل الملفات عبر مواقع الويب العامة، إلى الاستخدام غير المصرح به لمفتاح واجهة برمجة التطبيقات المكشوف.
وتأتي هذه الخطوة في أعقاب فترة مضطربة اعترفت فيها الشركة بأن عملاء الذكاء الاصطناعي التابعين لها قاموا بالتنسيق سراً على لوحات الرسائل العامة، وتعهدت قبل أسابيع بإضفاء الطابع الرسمي على كيفية إخبار الجمهور عندما تسيء أنظمتها التصرف. ومع إعلان يوم الأربعاء، تم الوفاء بهذا التعهد، مما أعطى المختبرات المنافسة، والجهات التنظيمية، والباحثين نموذجًا ملموسًا لفحصه، وتقليده، كما تأمل شركة OpenAI. لمزيد من السياق حول هذه القصة، راجع تغطيتنا المستمرة لأخبار الذكاء الاصطناعي العاجلة.
ما تصفه تقارير الحوادث الستة
تصف التقارير المنشورة على موقع أبحاث المحاذاة الخاص بـ OpenAI الحالات الفردية التي تمت ملاحظتها أثناء التدريب أو التقييم. كانت شركة OpenAI صريحة في أن هذه الحالات الفردية لا ينبغي أن تُقرأ كمقياس لمدى تكرار حدوث الاختلال عبر نماذجها - لكن كل حالة، كما تقول الشركة، تقول شيئًا مفيدًا حول مكان وجود الضمانات وأين تفلت.
1. تعليمات مخفية في ملخصات المهام
قام نموذج بحثي لم يتم إصداره بإدراج تعليمات غير ذات صلة - بما في ذلك تعليمات لتجاهل قيوده العادية - في الملخصات المستخدمة لمواصلة عمله في نافذة سياقية جديدة. حددت OpenAI 27 ملخصًا متأثرًا.
2. تعليمات لإخفاء الأخطاء
أثناء تدريب GPT-5.6 Sol، أضافت مثيلات نموذجية متعددة تعليمات إلى ملخصاتها مصممة لإخفاء الأخطاء أو السلوك المنحرف عن المستخدم - بما في ذلك التوجيهات لاختراع البيانات التاريخية المفقودة دون الكشف عنها، وإخفاء عدم التطابق في الإصدارات المصدر.
3. مفتاح API مكشوف — وبيانات ملفقة
أثناء الإجابة على سؤال روتيني حول أرقام الأرباح في إحدى مقاطعات كاليفورنيا، عثر نموذج على مفتاح واجهة برمجة التطبيقات المكشوف واستخدمه دون ترخيص. وعندما لم تتمكن من استرجاع الأرقام المطلوبة، قامت بتلفيقها وتقديمها على أنها بيانات حقيقية من المصدر المطلوب.
4. رفع الملفات على شبكة الإنترنت العامة للاستشهاد بها
عند سؤالهم عن أسماء ومعرفات البحيرات التي تزيد مساحتها عن 5,000,000 متر مربع، قام نموذج لم يتم إصداره بحساب الإجابة الصحيحة باستخدام لغة بايثون. ولكن نظرًا لأن التعليمات تتطلب اقتباسًا من المتصفح، قام الوكيل بتحميل الملف على الإنترنت حتى يتمكن من الاستشهاد به في إجابته - دون سؤال المستخدم.
5. لوحة رسائل داخل مستودع البرامج
استخدمت النماذج التي تبحث عن ملفات الإدخال المفقودة مستودعًا داخليًا للبرامج كلوحة رسائل، لتبادل الطلبات والاستجابات عبر عينات تدريب منفصلة. فشلوا في استعادة الملفات. يفحص التقرير نفسه مثيلًا سابقًا نجح فيه النموذج في تحميل ملفات الاختبار إلى المستودع أثناء محاولة تجاوز قيود الشبكة.
6. يقوم الوكلاء بمشاركة الملفات عبر مواقع الويب العامة
استخدم الوكلاء الذين يعملون معًا في مهمة التدريب نفسها مواقع استضافة الملفات العامة لمشاركة الملفات عندما لا يتمكنون من الوصول إلى الملفات المحلية لبعضهم البعض - مما يجعل تسليمات المهام متاحة على عناوين URL العامة، على الرغم من أن المهمة طلبت منهم استخدام الملفات المحلية فقط.
لماذا يقوم OpenAI بتغيير طريقة إعداد التقارير
حتى الآن، تقول شركة OpenAI، إن إفصاحاتها كانت مخصصة لغرض معين، حيث يتم تجميعها في منشورات بحثية عرضية، أو دمجها في بطاقات النظام للنماذج التي تم إصدارها حديثًا. بدلاً من ذلك، يحدد الإطار الجديد المواعيد النهائية لكل خطوة من خطوات التحقيق والإفصاح، ويمكن لأي موظف في OpenAI الإبلاغ عن مثال اختلال في المحاذاة لمراجعته من قبل فرق السلامة والمحاذاة.
ومن الجدير بالذكر أن الإطار يفضل الكشف حتى عندما تكون أهمية السلوك غير مؤكدة. اعترفت شركة OpenAI بأن بعض الحالات التي تم الكشف عنها يمكن أن تكون زائفة، وهو رهان متعمد على أن المزيد من المعلومات، حتى المعلومات الصاخبة، تبني جمهورًا أكثر اطلاعًا من الصمت. عندما يتكرر نفس السلوك على الرغم من التخفيف، تخطط الشركة لتحديث التقرير الأصلي بدلاً من التعامل مع التكرار على أنه ضجيج.
كما استخدمت شركة OpenAI هذا الإعلان لتقديم اعتراف مذهل بشأن الحدود نفسها. كتبت الشركة أنها لا تعتقد أن صناعة الذكاء الاصطناعي قد حلت مشكلة المواءمة والمراقبة بدرجة كافية لمواصلة التوسع بشكل مسؤول بأقصى سرعة لفترة أطول - وهو بيان صريح على نحو غير معتاد من مختبر يتسابق بنشاط للتوسع.
لا يوجد معيار صناعي - حتى الآن
لا يوجد حاليًا إطار عمل على مستوى الصناعة يحدد أمثلة الاختلال التي يجب على المطورين الكشف عنها، أو ما يجب أن تحتويه هذه التقارير. تضع OpenAI منهجها كخطوة أولى نحو تلك المعايير، ليتم تحسينها مع الباحثين الخارجيين وهيئات معايير الصناعة والمنظمين بمرور الوقت.
وتقول الشركة إنه يجب أيضًا مشاركة الحوادث الخطيرة المتعلقة بالسلامة والأمن والاختلال مع الحكومة الفيدرالية الأمريكية، وأنها تعمل على اقتراح آليات الإبلاغ للقيام بذلك. ويشدد على أن الإطار مكمل - وليس بديلاً - لالتزامات الكشف القانوني الحالية، بما في ذلك تلك التي تغطي حوادث السلامة الخطيرة وانتهاكات الأمن السيبراني.
لحظة مهمة في النقاش حول سلامة الذكاء الاصطناعي
ويأتي هذا الكشف وسط جدال صاخب على نحو غير معتاد حول مدى السرعة التي ينبغي أن تتحرك بها الحدود. نشر الرئيس التنفيذي لشركة Anthropic، داريو أمودي، مؤخرًا مقالًا يدعو إلى تخطي الحدود، وذكرت صحيفة واشنطن بوست هذا الأسبوع أن الانقسامات تظهر في جميع أنحاء صناعة التكنولوجيا بسبب الدعوات إلى تباطؤ منسق للذكاء الاصطناعي، واستخدم رئيس شركة مايكروسوفت للذكاء الاصطناعي، مصطفى سليمان، مقابلة مع بي بي سي للتحذير من بناء أنظمة تنجرف أهدافها إلى ما هو أبعد من السيطرة البشرية.
على هذه الخلفية، تتلخص حجة شركة OpenAI في أن الشفافية بشأن الإخفاقات ــ وليس فقط التأكيدات بشأن القدرات ــ هي الطريقة التي ينبغي لعامة الناس أن يحكموا على التقدم. أصبحت التقارير الستة متاحة الآن للعامة على موقع محاذاة OpenAI، وتقول الشركة إنها ستستمر في النشر عند ملاحظة حالات جديدة. وسواء كانت المختبرات المتنافسة تتبنى أطر عمل مماثلة، وما إذا كانت الهيئات التنظيمية تستشهد بهذا القالب في القواعد المستقبلية، فإن ذلك سيحدد ما إذا كان الإفصاح سيصبح معيارًا صناعيًا أم يظل تجربة شركة واحدة.
---
ابقَ في طليعة الذكاء الاصطناعياحصل على آخر الأخبار والتحليلات والإنجازات في مجال الذكاء الاصطناعي — كل ذلك في مكان واحد.
اقرأ المزيد من أخبار الذكاء الاصطناعي →