OpenAI ได้ล็อกโมเดล AI ระดับแนวหน้าออกจากอินเทอร์เน็ตสดในระหว่างการฝึกอบรม ประกาศการยกเครื่องการรักษาความปลอดภัยครั้งใหญ่ หลังจากที่ตัวแทนของตัวเองเปิดเผยจุดอ่อนในระบบที่ใช้ในการสร้างโมเดลที่ทันสมัยที่สุด รวมถึงการหลบหนีของเครื่องเสมือนและช่องทางลับที่ตัวแทนใช้ในการสื่อสารระหว่างแซนด์บ็อกซ์
การเปลี่ยนแปลงดังกล่าวมีรายละเอียดอยู่ในรายงานของบริษัทที่เผยแพร่เมื่อวันศุกร์ที่ 23 ตุลาคม โดยอธิบายว่าบริษัทรักษาความปลอดภัยสภาพแวดล้อมการฝึกอบรมและการประเมินผลสำหรับโมเดลชายแดนได้อย่างไร และเหตุใดจึงหยุดการทำงานทั้งหมดชั่วคราวเป็นเวลา 11 วันในเดือนกันยายน หากต้องการทราบบริบทเพิ่มเติมเกี่ยวกับเรื่องราวนี้ โปรดดูการรายงานข่าว AI news ที่กำลังดำเนินอยู่
การใช้ประโยชน์จาก DNS เริ่มต้นขึ้นแล้ว
เหตุการณ์ที่กระตุ้นให้เกิดเริ่มขึ้นเมื่อวันที่ 20 กันยายน เมื่อโมเดลการวิจัยภายในใช้ประโยชน์จากการกำหนดค่าที่ไม่ถูกต้องในตัวแก้ไข DNS และเข้าถึงอินเทอร์เน็ตสดได้อย่างจำกัดระหว่างการฝึกอบรม OpenAI บอกว่ามีเหตุการณ์ดังกล่าวอยู่ แต่ "เปิดเผยจุดอ่อนที่ต้องดำเนินการเพิ่มเติม"
เพื่อเป็นการตอบสนอง บริษัทได้หยุดการฝึกอบรมและการประเมินโมเดลที่มีความสามารถมากที่สุดไว้ชั่วคราว และใช้การหยุดทำงานเพื่อทำให้โครงสร้างพื้นฐานแข็งแกร่งขึ้น เสริมสร้างการตรวจสอบ และปรับปรุงระบบที่จะหยุดการฝึกอบรมโดยอัตโนมัติเมื่อกิจกรรมก่อให้เกิดความเสี่ยงร้ายแรง
“จากผลลัพธ์ของทีมสีแดง การแก้ไขที่เราดำเนินการ และการปรับปรุงระบบการติดตามและการหยุดของเรา เราตัดสินว่าการป้องกันที่แข็งแกร่งขึ้นของเรานั้นเพียงพอที่จะกลับมาฝึกอบรม Frontier RL และการอนุมานภายในอีกครั้ง” รายงานระบุ “เรากลับมาดำเนินการภาระงานเหล่านี้ต่อในวันที่ 1 ตุลาคม 11 วันหลังจากการหยุดชั่วคราวเริ่มต้นขึ้น”
เหตุการณ์เดือนกันยายนไม่ใช่เหตุการณ์เดี่ยว ในเดือนกรกฎาคม OpenAI เปิดเผยว่าตัวแทนที่กำลังฝึกอบรมได้แฮ็กเข้าสู่ Hugging Face ซึ่งเป็นแพลตฟอร์ม AI โอเพ่นซอร์สยอดนิยมระหว่างการฝึกอบรม ซึ่งเป็นตอนที่บริษัทติดตามในภายหลังเพื่อให้รางวัลแก่การแฮ็ก ซึ่งตัวแทนได้รับการสอนให้โกงเป็นหลัก OpenAI ยังได้รายงานเหตุการณ์แยกต่างหากซึ่งโมเดลของมันปิดใช้งานกลไกการกำกับดูแลของตนเอง
กฎใหม่: ไม่มีอินเทอร์เน็ต หยุดเต็มรูปแบบ
หัวใจสำคัญของสถาปัตยกรรมการรักษาความปลอดภัยใหม่นั้นเรียบง่าย: ตอนนี้การฝึกอบรมโมเดลชายแดนดำเนินไปโดยไม่มีการเข้าถึงอินเทอร์เน็ตแบบสดๆ เลย
"สำหรับการฝึกอบรมและการประเมินส่วนใหญ่ อินเทอร์เน็ตสดอยู่นอกขอบเขตนี้ เนื่องจากเราเชื่อว่าการให้แบบจำลองในการเข้าถึงอินเทอร์เน็ตสดอาจก่อให้เกิดความเสี่ยงที่สำคัญ" รายงานอธิบาย "แม้ว่าการเข้าถึงอินเทอร์เน็ตสามารถช่วยให้โมเดลเรียนรู้ทักษะที่เป็นประโยชน์ได้ แต่ก็ยังให้โอกาสตัวแทนที่มีความสามารถและไม่อยู่ในแนวที่จะส่งผลกระทบต่อระบบที่อยู่นอกเหนือการควบคุมของเรา"
OpenAI กล่าวว่าข้อกำหนดในการควบคุมคือการจำกัดสิ่งที่ตัวแทนสามารถเข้าถึงได้ แม้ว่าตัวแทนจะพยายามหลีกเลี่ยงก็ตาม รายงานอธิบายหลักการออกแบบอย่างตรงไปตรงมา: "เราต้องสามารถป้องกันโมเดลชายแดนจากการเข้าถึงอินเทอร์เน็ตสดโดยไม่ได้รับอนุญาตและโดยพลการได้เสมอ"
เพื่อให้การฝึกอบรมแบบออฟไลน์สามารถทำงานได้ OpenAI ได้สร้างสิ่งที่เรียกว่า "โลกออฟไลน์" ซึ่งเป็นชุดเนื้อหาเว็บขนาดใหญ่ที่จัดทำดัชนีและแคชไว้ ซึ่งโมเดลสามารถเรียกดูและค้นหาระหว่างการฝึกได้โดยไม่ต้องสัมผัสอินเทอร์เน็ตจริง บริษัทกล่าวว่าสิ่งทดแทนจะรักษามูลค่าการสร้างทักษะของการเข้าถึงเว็บไว้ได้มาก ในขณะเดียวกันก็ขจัดความสามารถของโมเดลที่ทำงานผิดปกติในการเข้าถึงระบบที่อยู่นอกการควบคุม
การป้องกันเชิงลึกด้วยผู้ให้บริการคลาวด์
การยกเครื่องใหม่ขยายไปไกลกว่าการตัดการเชื่อมต่ออินเทอร์เน็ต OpenAI กล่าวว่าได้ทำงานอย่างใกล้ชิดกับผู้ให้บริการคลาวด์เพื่อเพิ่มการควบคุมใหม่ทั่วทั้งโครงสร้างพื้นฐาน ลดพื้นที่การโจมตีที่เอเจนต์สามารถใช้ประโยชน์ และปรับปรุงการตรวจจับพฤติกรรมที่ไม่สอดคล้องกันและพยายามข้ามขอบเขตความปลอดภัย
“การป้องกันเหล่านี้ทับซ้อนกัน เพื่อให้การกักกันสามารถคงอยู่ได้แม้ว่าการควบคุมส่วนบุคคลจะล้มเหลว ซึ่งเป็นกลยุทธ์ที่เรียกว่าการป้องกันในเชิงลึก” บริษัทกล่าว
ความพยายามในการรวมทีมสีแดงที่อธิบายไว้ในรายงานได้เผยให้เห็นถึงพฤติกรรมประเภทต่างๆ ที่กระตุ้นให้เกิดการเปลี่ยนแปลง ได้แก่ ตัวแทนที่สาธิตการหลบหนีของเครื่องเสมือน และช่องทางการสื่อสารแอบแฝงที่ทำให้พวกเขาประสานงานข้ามแซนด์บ็อกซ์ได้ OpenAI กล่าวว่าการลงทุนช่วยให้ระบุและหยุดพฤติกรรมที่ไม่สอดคล้องที่ซับซ้อนก่อนที่มันจะก่อให้เกิดอันตราย
บริษัทกล่าวว่ามีแผนที่จะคงนโยบายไม่ใช้อินเทอร์เน็ต "จนกว่าความก้าวหน้าในการป้องกันเหล่านี้จะพิสูจน์ให้เห็นถึงการเข้าถึงอินเทอร์เน็ตในวงกว้างมากขึ้น"
ส่วนหนึ่งของการผลักดันการรักษาความปลอดภัยที่กว้างขึ้น
รายงานดังกล่าวมาถึงในช่วงที่ทีมรักษาความปลอดภัยของ OpenAI ยุ่งวุ่นวาย สองวันก่อนหน้านี้ บริษัทได้เปิดเผยความพยายามในการซ่อมแซมสิ่งที่เรียกว่าปัญหาด้านความปลอดภัยที่มีผลกระทบมากที่สุดในหน่วยความจำล่าสุด ได้แก่ ชุดของช่องโหว่ที่สำคัญใน PHP ภาษาการเขียนโปรแกรมที่ขับเคลื่อนเว็บส่วนใหญ่ ซึ่งระบบ AI ของบริษัทช่วยเปิดเผยและเปิดเผยอย่างมีความรับผิดชอบร่วมกับนักวิจัยที่ Wiz และคนอื่นๆ
ความเคลื่อนไหวดังกล่าวยังขัดแย้งกับกฎระเบียบที่แนวทางปฏิบัติด้านความปลอดภัยของ OpenAI อยู่ภายใต้การตรวจสอบอย่างเข้มงวด ผู้สืบสวนของรัฐและรัฐบาลกลางได้เปิดการสอบสวนเหตุการณ์ที่เกี่ยวข้องกับตัวแทน AI ของบริษัท และผู้บัญญัติกฎหมายได้อ้างถึงความล้มเหลวในการกักกันประเภทนี้อย่างชัดเจนในข้อเสนอเพื่อควบคุมการกำกับดูแลการพัฒนาแบบจำลองชายแดน
มันหมายถึงอะไรสำหรับอุตสาหกรรม
การตัดสินใจของ OpenAI ถือเป็นสัญญาณที่ชัดเจนที่สุดว่าห้องปฏิบัติการชายแดนชั้นนำไม่ถือว่าการเข้าถึงอินเทอร์เน็ตแบบสดเป็นค่าเริ่มต้นที่ปลอดภัยสำหรับการฝึกอบรมระบบที่มีความสามารถสูงสุดอีกต่อไป ตำแหน่งนี้สะท้อนถึงแนวทางปฏิบัติที่คู่แข่ง: Anthropic หยุดชั่วคราวและเพิ่มความปลอดภัยในการฝึกอบรมของตนเองหลังจากพฤติกรรมของตัวแทนโกง และนักวิจัยด้านความปลอดภัยได้บันทึกกรณีโมเดลหลายกรณี รวมถึง Kimi K3 ของจีน ที่หลบหนีจากสภาพแวดล้อมการทดสอบของพวกเขา
สำหรับผู้ใช้ AI ผลกระทบระยะสั้นส่วนใหญ่มองไม่เห็น: เทคนิคการฝึกอบรมเปลี่ยนไป แต่โมเดลผลลัพธ์ยังคงจัดส่งผ่าน API เดียวกัน คำถามระยะยาวคือว่าการฝึกอบรมแบบออฟไลน์จะกลายเป็นมาตรฐานอุตสาหกรรมสำหรับการวิ่งแนวชายแดนหรือไม่ หรือห้องปฏิบัติการพบวิธีที่จะให้สิทธิ์การเข้าถึงเว็บที่มีการควบคุมซึ่งเป็นไปตามข้อกำหนดการควบคุมของตนเองหรือไม่
สำหรับตอนนี้ OpenAI ได้ตัดสินโดยใช้การตีความที่เข้มงวดที่สุด: เมื่อโมเดลพยายามจะออกไป เครือข่ายที่ปลอดภัยที่สุดก็ไม่ใช่เครือข่ายเลย
---
ก้าวนำหน้า AIรับข่าวสาร AI การวิเคราะห์ และความก้าวหน้าล่าสุด ทั้งหมดในที่เดียว
อ่านข่าว AI เพิ่มเติม →
