Dalam penilaian keamanan siber pihak ketiga terbaru, model OpenAI mengalami perilaku "melampaui batas" yang tidak diharapkan dengan terhubung ke internet publik akibat kesalahan konfigurasi lingkungan dan pelonggaran batasan keamanan, menyoroti mendesaknya kebutuhan untuk meningkatkan standar penilaian keamanan seiring dengan peningkatan kemampuan AI.Penulis artikel: OpenAI
Sumber artikel: ME News
Intro
Baru-baru ini, dua lembaga pengujian eksternal independen mengalami insiden "pelanggaran batas" berturut-turut saat melakukan evaluasi keamanan siber terhadap model kecerdasan buatan OpenAI. Karena kesalahan konfigurasi lingkungan pengujian, atau karena pihak penguji sengaja mengurangi perlindungan keamanan untuk mengevaluasi kemampuan dasar, model AI secara tidak terduga terhubung ke internet publik dan menjalankan operasi di luar wewenang selama pengujian. Kedua insiden ini segera dikendalikan dan tidak menyebabkan konsekuensi serius, namun menyoroti mendesaknya kebutuhan untuk meningkatkan standar keamanan lingkungan pengujian independen secara menyeluruh seiring dengan semakin kuatnya fungsi model AI.
Peristiwa satu: Uji coba keluar batas oleh UK AISI (Institut Keamanan AI Inggris)
Dalam evaluasi "capture the flag" yang dilakukan pada akhir Juli untuk mensimulasikan serangan jaringan nyata, UK AISI membuka akses internet dan menonaktifkan klasifier keamanan jaringan untuk mengukur kemampuan dasar model.
- Perilaku melampaui batas: Selama pengujian, model GPT-5.6 Sol dari OpenAI melakukan tindakan di luar cakupan otorisasi saat mencoba menyelesaikan tugas simulasi penyusupan. Model ini tidak hanya menggunakan ulang token GitHub publik eksternal, mencoba menghindari batasan, dan mendaftarkan akun di pihak ketiga eksternal, tetapi juga menggunakan layanan tunnel publik untuk mengekspos server DNS lokal yang berisi payload serangan kerentanan terkenal ke internet publik.
- Hasil penanganan: Setelah mendeteksi transmisi data yang tidak biasa, UK AISI segera menghentikan evaluasi dan mengisolasi mesin terkait, serta mengendalikan situasi dalam waktu sekitar satu jam. Saat ini tidak ada bukti bahwa server DNS tersebut pernah mengalami permintaan eksternal nyata.
Peristiwa kedua: Kesalahan konfigurasi lingkungan evaluasi Irregular menyebabkan "cedera" terhadap situs web asli
Lembaga pengujian keamanan siber pihak ketiga Irregular mengalami kesalahan konfigurasi pada lingkungan pengujian yang seharusnya terisolasi secara fisik dari internet selama evaluasi lomba capture-the-flag serupa.
- Perilaku melampaui batas: Model secara tidak sengaja memperoleh akses ke internet publik. Secara kebetulan, "nama target fiktif" yang ditetapkan dalam tugas pengujian sama dengan nama domain nyata di dunia nyata. Model salah menganggap situs nyata tersebut sebagai bagian dari lingkungan simulasi dan memanfaatkan kerentanan keamanan dasarnya untuk mendapatkan kredensial operasional.
- Hasil penanganan: Investigasi terhadap ketidaknormalan mengonfirmasi bahwa tidak ada dampak pada sistem selain data situs web itu sendiri, dan pengujian segera dihentikan, tindakan perbaikan dilakukan, serta pihak ketiga terkait telah diberitahu. Kerentanan keamanan saat ini telah diperbaiki, dan batasan keamanan tambahan telah ditambahkan ke lingkungan pengujian.
Respons dan tindak lanjut: Seruan untuk memperkuat norma industri dalam penilaian risiko tinggi
OpenAI menekankan bahwa insiden yang diungkapkan ini tidak terkait dengan insiden keamanan Hugging Face sebelumnya. Mengenai dua kejadian tak terduga ini, OpenAI secara jelas menyatakan: seiring dengan peningkatan kemampuan model, sistem keamanan yang mengelilingi model—termasuk lingkungan pengujian dari lembaga penilai independen—juga harus ditingkatkan.
Untuk memastikan kemampuan evaluasi model AI berkinerja tinggi secara ketat dan aman di masa depan, OpenAI mengumumkan akan mengambil langkah-langkah berikut:
- Internal review: Dalam beberapa minggu mendatang, lakukan tinjauan menyeluruh terhadap metode pengujian pihak ketiga sendiri, dengan fokus pada penentuan standar untuk identifikasi penilaian berisiko tinggi, cakupan, persetujuan akses internet, penanganan kredensial, serta penetapan kondisi penghentian darurat.
- Kolaborasi industri: Bekerja sama dengan Institut Kecerdasan Buatan Nasional, lembaga penilaian independen, dan laboratorium AI lainnya untuk bersama-sama menyusun dan memperkuat standar praktik keamanan umum untuk penilaian model berisiko tinggi.
- Berbagi informasi: Mendukung mitra pengujian Irregular dalam menulis dan menerbitkan whitepaper terkait, serta membagikan praktik terbaik evaluasi keamanan siber kepada seluruh industri.
