Berdasarkan pemantauan Beating, perusahaan infrastruktur AI Agent Composio menghubungkan Kimi K3 yang sama ke Kimi Code, Hermes, dan Claude Code untuk menyelesaikan 28 tugas identik. Jumlah keberhasilan ketiga kerangka kerja hanya berbeda dua tugas, namun penggunaan token dan biayanya sangat berbeda. Kimi Code menyelesaikan 22 tugas, Hermes menyelesaikan 21 tugas, dan Claude Code menyelesaikan 20 tugas. Median token per tugas masing-masing adalah 61.000, 67.000, dan 340.000. Composio memperkirakan biaya rata-rata per tugas sekitar $0,22, $0,28, dan $2. Penggunaan token untuk tugas tertentu berbeda hingga 30 kali lipat. Hermes paling cepat, dengan median waktu per tugas sebesar 179 detik. Kimi Code membutuhkan 297 detik, sedangkan Claude Code membutuhkan 348 detik. Studi lain oleh Writer juga menghasilkan hasil yang serupa. Para peneliti hanya mengganti kerangka kerja pada 22 tugas perusahaan dan enam model, yang mengakibatkan penurunan penggunaan token sebesar 38%, penurunan biaya per tugas sebesar 41%, penurunan waktu sebesar 44%, dan kualitas penyelesaian yang secara umum tetap seimbang.
Composio Menguji Kimi K3 pada Tiga Kerangka, Biaya Token Berbeda Hingga 9 Kali
MarsBitBagikan
Ringkasan
Composio menguji Kimi K3 pada Kimi Code, Hermes, dan Claude Code, menjalankan 28 tugas identik. Tingkat keberhasilan serupa, tetapi biaya token dan waktu bervariasi. Kimi Code menggunakan 61.000 token per tugas, dengan biaya $0,22, sementara Claude Code menghabiskan 340.000 token dengan biaya $2,00 per tugas. Beberapa tugas menggunakan 30x lebih banyak token. Hermes menyelesaikan paling cepat dalam 179 detik. Hasil ini menyoroti pentingnya kepatuhan CFT dalam mengelola aset berisiko tinggi seperti infrastruktur AI.
Sumber:Tampilkan versi asli
Penafian: Informasi pada halaman ini mungkin telah diperoleh dari pihak ketiga dan tidak mencerminkan pandangan atau opini KuCoin. Konten ini disediakan hanya untuk tujuan informasi umum, tanpa representasi atau jaminan apa pun, dan tidak dapat ditafsirkan sebagai saran keuangan atau investasi. KuCoin tidak bertanggung jawab terhadap segala kesalahan atau kelalaian, atau hasil apa pun yang keluar dari penggunaan informasi ini.
Berinvestasi di aset digital dapat berisiko. Harap mengevaluasi risiko produk dan toleransi risiko Anda secara cermat berdasarkan situasi keuangan Anda sendiri. Untuk informasi lebih lanjut, silakan lihat Ketentuan Penggunaan dan Pengungkapan Risiko.