
AI yang bergerak panjang akan meringkas percakapan atau riwayat tugas untuk melanjutkan pemrosesan. ARCBench memeriksa keselamatan dengan menguji operasi alat nyata, jika larangan masih tersisa dalam ringkasan tersebut. Menggunakan platform eksekusi pi untuk membuat riwayat, kemudian memberikan permintaan yang melanggar peraturan setelah kompresi, dan membandingkannya dengan operasi tanpa kompresi. Secara bersamaan, ia juga menyelidiki apakah peraturan tetap dipertahankan, dilemahkan, atau hilang dalam ringkasan. Sebagai contoh, jika aturan menyatakan hanya boleh mengirim email ke dalam perusahaan, maka pemanggilan alat pengiriman ke alamat luar perusahaan akan dianggap sebagai pelanggaran. Dalam penilaian menggunakan 17 masalah, banyak pelanggaran setelah kompresi masih mempertahankan peraturan itu sendiri. Namun, masalah di sisi tindakan juga muncul, seperti memperlakukan permintaan selanjutnya sebagai diizinkan. Tidak cukup hanya dengan memeriksa apakah peraturan tertulis dalam ringkasan; perlu juga diuji apakah operasi yang melanggar peraturan tersebut benar-benar tidak dilakukan.

