LangChain meletakkan Jev di dalam gelung agen mereka sendiri dan menunjukkan tiga tugas yang mereka berikan kepadanya. Dalam demo, model LLM mengambil kira-kira 5 saat untuk menentukan sama ada teks tersebut mengandungi PII, dan Jev menjawab segera dengan 98%. Oleh itu, agen pemrograman mereka boleh bertanya kepada Jev seberapa sukar suatu tugas dan menyimpan model berkuasa untuk tugas-tugas yang sukar sahaja. Middleware mod auto mereka bertanya kepada Jev sama ada panggilan alat berisiko dan menghalangnya semasa berjalan, pemeriksaan yang telah dia matikan kerana dahulunya terlalu perlahan. Dan model yang sama menilai jawapan agen berdasarkan rubrik dalam penilaian dalam talian: betul, sepadan dengan rujukan, berasaskan, dan mengutip sumber. Panduan saya menunjukkan pengaturan ini pada sumber penyelidikan, dengan rubrik kepentingan 0 hingga 3 meliputi 50 kertas dan siri semakan untuk panggilan dengan keyakinan rendah. Ia juga memeriksa kertas-kertas berguna yang disimpan secara senyap oleh penapis. Tonton sesi ini, kemudian ambil pemula dan petikan di bawah