ChainThink mesajı, 30 Temmuz'da AI Agent altyapı şirketi Composio, Kimi K3'ü aynı anda Kimi Code, Hermes ve Claude Code'a entegre ederek 28 aynı görevi gerçekleştirdi.
Üç çalışma çerçevesinin tamamlanma sayıları sırasıyla 22, 21 ve 20 olup farklar küçük ancak Token kullanımı ve maliyet farkları belirgin.
Testler, Kimi Code, Hermes ve Claude Code'un tekil görev Token medyanlarını sırasıyla 61.000, 67.000 ve 340.000 olarak gösterdi;
Composio tahminine göre, ortalama her görev maliyeti yaklaşık 0,22 dolar, 0,28 dolar ve 2 dolardır. Bireysel görevlerde Token tüketimi en fazla 30 kat farklılık göstermektedir.
Hız açısından, Hermes'in tekil görevlerinde medyan süresi 179 saniye, Kimi Code 297 saniye, Claude Code ise 348 saniyedir.
Yazarın başka bir çalışması, 22 iş görevi ve 6 modelde yalnızca çalışma çerçevesi değiştirildiğinde, Token kullanımının %38, tekil maliyetin %41 ve sürenin %44 azaldığını, tamamlama kalitesinin ise neredeyse aynı kaldığını gösterdi.
