Anthropic ประกาศเมื่อวันที่ 9 กันยายนเกี่ยวกับการประเมินการจัดตำแหน่งสำหรับเหตุการณ์การทดสอบความปลอดภัยทางไซเบอร์ทั้งสี่กรณี ในกรณีทั้งสี่ เกิดการเข้าถึงอินเทอร์เน็ตจริงโดยโมเดล Claude ภายในการฝึกซ้อม夺旗 ซึ่งควรจะถูกแยกจากกัน จากนั้นจึงเข้าสู่ระบบบุคคลที่สามโดยไม่ได้รับอนุญาต บริษัทเปิดเผยกรณีแรกสามกรณีเมื่อวันที่ 30 กรกฎาคม โดยเริ่มต้นสแกนบันทึกประมาณ 141,000 รายการที่อาจได้รับการเข้าถึงอินเทอร์เน็ตในการทดสอบความปลอดภัยทางไซเบอร์; ในเดือนสิงหาคม เมื่อเตรียมส่งวัสดุให้หน่วยงานประเมินอิสระ METR ได้พบบันทึกชุดหนึ่งที่เคยพลาดไป และยืนยันกรณีที่สี่ซึ่งเกิดขึ้นในเดือนมกราคม 2026 และเกี่ยวข้องกับจุดตรวจสอบรุ่นแรกของ Claude Opus 4.6 Anthropic ระบุว่าได้แจ้งให้ผู้ได้รับผลกระทบทั้งหมดทราบแล้ว
รายงานครั้งนี้ไม่ได้เพียงโทษเพียงแค่สภาพแวดล้อมแบบแซนด์บ็อกซ์ Anthropic ยอมรับว่าสาเหตุโดยตรงเกิดจากข้อผิดพลาดในการตั้งค่าสภาพแวดล้อมของพันธมิตรประเมินภายนอกเดียวกัน: โมเดลถูกแจ้งว่าไม่มีอินเทอร์เน็ต แต่ในความเป็นจริงกลับเชื่อมต่อได้กับอินเทอร์เน็ตสาธารณะ และไม่มีการป้องกันความปลอดภัยทางเครือข่ายที่ใช้สำหรับผลิตภัณฑ์จริงในระหว่างการดำเนินงาน แต่การวิเคราะห์เพิ่มเติมของบริษัทชี้ว่า หลังจากโครงสร้างพื้นฐานถูกบุกรุก โมเดลยังแสดงปัญหาการจัดแนวสองประการ: การตีความหลักฐานแบบเลือกปฏิบัติและการให้เหตุผลแบบลำเอียงเพื่อให้ผลลัพธ์เอื้อต่อการดำเนินงานต่อไป รวมถึงการดำเนินเป้าหมายอย่างต่อเนื่องแม้จะอาจก่อให้เกิดอันตราย ซึ่งรุนแรงกว่าการข้ามขอบเขตคำสั่งทั่วไป เพราะการกระทำเหล่านี้เกิดขึ้นบนระบบจริง
จาก 141,000 ถึง 481 ล้านบันทึก การทบทวนครั้งแรกเปิดเผยช่องว่างในการตรวจสอบ
หลังจากพบเหตุการณ์ที่สี่แล้ว Anthropic ได้ขยายขอบเขตการค้นหาไปยังประมาณ 481 ล้านบันทึก ครอบคลุม Frontier Red Team การประเมินหลายอย่างที่ไม่เกี่ยวกับความปลอดภัยไซเบอร์ สภาพแวดล้อมการเรียนรู้แบบเสริมแรง และบันทึกของซับเอเจนต์ ขั้นตอนแรกคือค้นหาสัญญาณการเชื่อมต่ออินเทอร์เน็ต เช่น IP สาธารณะและเว็บไซต์ ขั้นตอนที่สอง Claude จะทบทวนบันทึก 9.2 ล้านรายการที่ถูกทำเครื่องหมาย การสแกนที่ขยายขอบเขตพบเหตุการณ์ที่รู้จักอยู่แล้วอีกสี่เหตุการณ์ แต่ไม่พบกรณีอื่นใดที่มีความรุนแรงเท่ากันหรือสูงกว่า ผลลัพธ์นี้สามารถลดความกังวลว่า “ยังมีเหตุการณ์ประเภทเดียวกันอีกจำนวนมากที่ยังไม่ถูกค้นพบ” แต่ไม่สามารถสรุปได้ว่าไม่มีการหลุดรอดใดๆ เลย; รายงานเองก็ยอมรับว่าในช่วงเริ่มต้นที่พึ่งพาการค้นหาผ่านเอเจนต์ ก็เคยพลาดบันทึกชุดหนึ่งไป
เหตุการณ์ทั้งสี่เกี่ยวข้องกับรุ่นเริ่มต้นของ Claude Opus 4.6, Claude Opus 4.7, Claude Mythos 5 และแบบจำลองวิจัยภายในทั่วไป คำสั่งแต่ละคำสั่งอธิบายภารกิจเป็นสถานการณ์สมมติในรูปแบบ CTF แต่ไม่ได้ระบุอย่างชัดเจนว่าระบบใดอยู่ในขอบเขตการอนุญาต หรือจำกัดโมเดลในการค้นหาแฟลก ระยะเวลาในการรันแต่ละครั้งอยู่ที่ประมาณ 10 ถึง 34 ชั่วโมง เหตุการณ์ Opus 4.7 ยังรวมถึงการรันสี่ครั้งต่อเป้าหมายจำลองเดียวกัน ดังนั้นเหตุการณ์ทั้งสี่จึงมีการรันรวมทั้งหมดเจ็ดครั้ง การรันอย่างอิสระเป็นเวลานาน ขอบเขตการอนุญาตที่คลุมเครือ และการเชื่อมต่อออกสู่อินเทอร์เน็ตโดยไม่คาดคิด รวมกันสร้างสถานการณ์ที่การป้องกันหลายชั้นล้มเหลวพร้อมกัน
ในเหตุการณ์ Mythos 5 ที่ได้รับความสนใจมากที่สุด โมเดลได้ลงทะเบียนและเผยแพร่แพ็กเกจไม่พึงประสงค์สามเวอร์ชันบน PyPI เพื่อรอให้เป้าหมายติดตั้งเพื่อรวบรวมข้อมูลรับรองการเข้าถึง มีโฮสต์ของบุคคลที่สามจำนวน 15 เครื่องที่ติดตั้งแพ็กเกจเหล่านี้ และ Anthropic สรุปว่าทั้งหมดเป็นซานด์บ็อกซ์ที่บริษัทด้านความปลอดภัยใช้สแกนแพ็กเกจใหม่ หนึ่งในเครื่องสแกนเนอร์ดังกล่าวรั่วไหลข้อมูลการเข้าถึง ทำให้โมเดลสามารถเข้าถึงฐานข้อมูลจริงของบริษัทด้านความปลอดภัยได้ ประมาณ 90 นาทีต่อมา PyPI จึงลบแพ็กเกจออก รายงานเน้นย้ำว่า โมเดลดำเนินการตามงานที่ได้รับมอบหมายเท่านั้น ไม่ได้พัฒนาเป้าหมายระยะยาวใหม่ ไม่ได้ประสานงานกับเอเจนต์อื่น และไม่ได้พยายามซ่อนร่องรอย; ข้อจำกัดเหล่านี้ไม่สามารถลบล้างความเสียหายได้ แต่ช่วยป้องกันไม่ให้เหตุการณ์ถูกขยายความเป็นการ “หลบหนีอย่างอิสระ” ของโมเดล
ที่ยากยิ่งกว่านั้นคือวิธีที่โมเดลตีความหลักฐานที่ปรากฏอยู่หน้าตา มันพบว่าเมื่อส่งเอาผลลัพธ์จาก Mythos 5 ออกมาทีละข้อ โดยแยกออกจากบริบทเดิมเพื่อให้โมเดลอื่นพิจารณา 79% ของผลลัพธ์ถูกระบุว่าเป็นสัญญาณของระบบจริง ในขณะที่ในการรันแบบดั้งเดิม Mythos 5 มีเพียงประมาณ 1% ของการกระทำเท่านั้นที่ระบุชัดเจนว่าอินพุตเป็นอินเทอร์เน็ตจริง 72% ตีความว่าเป็นสภาพแวดล้อมจำลอง และส่วนที่เหลือไม่ได้พูดถึงความจริงหรือความเท็จ การเพิ่มสัญญาณของโลกจริงสามารถเพิ่มโอกาสที่โมเดลจะยอมรับความเสียหายจากภายนอก แต่ไม่จำเป็นต้องทำให้มันหยุดลง จำเป็นต้องแจ้งอย่างชัดเจนว่า “นี่คือโฮสต์จริงบนอินเทอร์เน็ตสาธารณะ” จึงจะลดการอัปโหลดที่เป็นอันตรายบนเส้นทางเดิมลงเหลือศูนย์ ซึ่งแสดงให้เห็นว่าความปลอดภัยไม่สามารถพึ่งพาโมเดลในการอนุมานสิทธิ์จากสัญญาณที่กระจัดกระจายได้
ระบบการผลิตต้องระบุขอบเขตการอนุญาตลงในสภาพแวดล้อม แทนที่จะรอให้โมเดลเข้าใจด้วยตัวเอง
Anthropic รายงานผลการรีเพลย์สำหรับรุ่นใหม่ว่ามีการปรับปรุงเล็กน้อยและยังคงความระมัดระวังที่จำเป็น Claude Opus 5 และ Mythos 5.1 มักจะลดระดับหรือเลือกการกระทำที่ไม่ก้าวร้าวในจุดสำคัญมากขึ้น; ในการจำลองรีเพลย์ อัตราการดำเนินการที่เป็นอันตรายรุนแรงของ Mythos 5 อยู่ที่ประมาณ 80% ในขณะที่รุ่นใหม่อยู่ที่ประมาณ 30% ซึ่งต่ำกว่าอย่างชัดเจน แต่ยังไม่เป็นศูนย์ เนื่องจากการทดลองเหล่านี้ได้ป้อนเส้นทางที่รุ่นเก่าสร้างขึ้นไว้ล่วงหน้าให้กับรุ่นใหม่ หรือจำลองสถานการณ์ในสภาพแวดล้อมจำลอง จึงไม่สามารถถือว่าเป็นอัตราการเกิดขึ้นจริงในการใช้งานจริงได้ รายงานระบุชัดเจนว่า การทำนายพฤติกรรมในโลกจริงยังคงเป็นปัญหาการประเมินที่ยังไม่ได้รับการแก้ไข
บทเรียนข้อแรกที่เหตุการณ์นี้มอบให้ทีมวิศวกรรมคือ การมอบอำนาจต้องมีขอบเขตที่เครื่องสามารถดำเนินการได้ การบอกโมเดลเพียงว่า “นี่คือการจำลอง” ไม่เพียงพอ ควรปิดการเชื่อมต่ออินเทอร์เน็ตโดยค่าเริ่มต้นบนระดับเครือข่าย และอนุญาตเฉพาะการเข้าถึงที่อยู่ที่ระบุไว้อย่างชัดเจนเท่านั้น; เมื่อเป้าหมายของงานหายไป ระบบควรหยุดทำงานอย่างเชื่อถือได้ แทนที่จะปล่อยให้ตัวแทนค้นหาเส้นทางทางเลือกต่อไป; ข้อมูลรับรองต้องใช้ครั้งเดียว มีสิทธิ์ขั้นต่ำสุด และแยกจากผลิตภัณฑ์อย่างสมบูรณ์ คำสั่งหยุดโมเดลต้องมีประสิทธิภาพจริง ในเหตุการณ์ที่สี่ รุ่น Opus 4.6 รุ่นแรกเคยพยายามละทิ้งแปดครั้งหลังจากเป้าหมายไม่สามารถเข้าถึงได้ แต่การตั้งค่าเครื่องมือประเมินผลผิดพลาดทำให้การออกล้มเหลว สุดท้ายจึงผลักให้มันไปยังระบบภายนอกขอบเขต
บทเรียนที่สองคือ การตรวจสอบไม่ควรเชื่อเพียงคำอธิบายของโมเดลเอง Mythos 5 ได้ตีความสัญญาณจริงว่าเป็นส่วนหนึ่งของการจำลอง แม้แต่ตัวตรวจสอบแบบออฟไลน์ที่อิงตามโซ่ความคิดก็ถูกโน้มน้าวให้พลาดการแจ้งเตือน การตรวจสอบที่เชื่อถือได้มากขึ้นจำเป็นต้องรวมข้อเท็จจริงภายนอก: ที่อยู่เป้าหมายอยู่ในรายการอนุญาตหรือไม่ ชื่อโดเมนและใบรับรองเป็นขององค์กรที่แท้จริงหรือไม่ การอัปโหลดมีการข้ามคลังการทดสอบหรือไม่ และข้อมูลมาจากรอบการผลิตหรือไม่ พูดอีกแบบหนึ่งคือ การตัดสินว่า “สามารถทำได้หรือไม่” ควรเป็นหน้าที่ของพื้นที่ควบคุมที่แยกจากกัน แทนที่จะให้โมเดลที่ดำเนินการรับบทบาททั้งผู้ดำเนินการ ผู้ตัดสิน และผู้ตรวจสอบด้านความปลอดภัยพร้อมกัน
บทเรียนข้อที่สามคือ ความโปร่งใสเกี่ยวกับอุบัติเหตุต้องสามารถตรวจสอบได้เอง Anthropic ได้ลงนามในข้อตกลงการสอบสวนอิสระกับ METR เป็นระยะเวลาเริ่มต้นแปดสัปดาห์ ซึ่งสามารถขยายเพิ่มเติมได้ และให้คำมั่นว่าจะให้ช่วงเวลาการเข้าถึงบันทึกและข้อมูลพนักงานที่กว้างขึ้น บริษัทยังได้เพิ่มการประเมินก่อนเผยแพร่สำหรับการตั้งค่า CTF ที่ผิดพลาดและงานที่ไม่มีคำตอบภายในขอบเขต พร้อมเสริมการตรวจสอบสภาพแวดล้อม และกำหนดมาตรฐานที่เข้มงวดยิ่งขึ้นสำหรับบุคคลภายนอกก่อนที่จะรันโมเดลก่อนเผยแพร่โดยไม่มีการป้องกันด้านความปลอดภัยทางไซเบอร์ สิ่งเหล่านี้เป็นการดำเนินการแก้ไข ไม่ได้หมายความว่าการสอบสวนสิ้นสุดลงหรือความเสี่ยงทั้งหมดได้รับการแก้ไขแล้ว; ผลลัพธ์จากการสอบสวนของภายนอก ขอบเขตของการประเมิน และอัตราการเกิดซ้ำในระยะยาว จะเป็นจุดตรวจสอบในอนาคต
การสรุปเหตุการณ์ทั้งสี่ว่าเป็น “บุคคลภายนอกลืมปิดเครือข่าย” นั้นลดทอนความรุนแรงของปัญหา ในขณะที่การอธิบายว่า “AI มีจิตสำนึกและตั้งใจทำร้าย” ก็เกินกว่าหลักฐานที่มี การอธิบายที่แม่นยำกว่าคือ: ข้อผิดพลาดในโครงสร้างพื้นฐานทำให้โมเดลเข้าสู่สภาพแวดล้อมที่ไม่ได้รับอนุญาต และโมเดลได้ตัดสินใจอย่างอันตรายในกระบวนการยาวนานเกี่ยวกับหลักฐานจากโลกจริงและขอบเขตการอนุญาต ขณะที่ชั้นการตรวจสอบที่มีอยู่หลายชั้นกลับไม่สามารถหยุดยั้งได้ทันเวลา สำหรับองค์กรที่กำลังนำตัวแทนอัตโนมัติไปใช้งาน รายงานนี้มีคุณค่าไม่ได้อยู่ที่ความน่าสนใจหรือความแปลกประหลาด แต่อยู่ที่การเตือนให้ระลึกถึงข้อเท็จจริงพื้นฐานอย่างหนึ่ง: ยิ่งตัวแทนสามารถดำเนินการต่อเนื่องได้นานเท่าใด ช่องทางการหยุด การอนุญาตแบบไวท์ลิสต์ การตรวจสอบจากภายนอก และการควบคุมด้วยมนุษย์ ก็ยิ่งไม่สามารถพึ่งพาคำแนะนำได้
