ChainThink melaporkan, pada 30 Julai, syarikat infrastruktur AI Agent Composio menghubungkan Kimi K3 yang sama kepada Kimi Code, Hermes, dan Claude Code untuk menjalankan 28 tugas yang sama.
Jumlah penyelesaian kerangka kerja ketiga ialah 22, 21, dan 20, perbezaannya kecil, tetapi penggunaan dan kos Token jelas berbeza.
Ujian menunjukkan bahawa median token tugas individu untuk Kimi Code, Hermes, dan Claude Code masing-masing ialah 61,000, 67,000, dan 340,000;
Composio menganggarkan kos purata setiap tugas sekitar US$0.22, US$0.28, dan US$2. Penggunaan Token untuk tugas individu berbeza sehingga 30 kali ganda.
Dari segi kelajuan, masa median tugas tunggal Hermes ialah 179 saat, Kimi Code ialah 297 saat, dan Claude Code ialah 348 saat.
Kajian lain oleh Writer juga menunjukkan bahawa dengan hanya menggantikan kerangka kerja operasi pada 22 tugas perniagaan dan 6 model, penggunaan Token berkurang 38%, kos per unit turun 41%, masa yang diambil berkurang 44%, dan kualiti penyelesaian tetap serupa.
