Beating İzleme'ye göre, AI Agent altyapı şirketi Composio, aynı Kimi K3 modelini Kimi Code, Hermes ve Claude Code'a entegre ederek 28 aynı görevi tamamladı. Üç farklı çalışma çerçevesinin başarılı tamamlama sayıları sadece 2 görev farkla sınırlıydı, ancak Token kullanım miktarları ve maliyetler büyük ölçüde farklıydı. Kimi Code 22 görevi, Hermes 21 görevi, Claude Code ise 20 görevi tamamladı. Tek bir görevdeki Token medyanı sırasıyla 61.000, 67.000 ve 340.000 idi. Composio, her bir görevin ortalama maliyetinin yaklaşık 0,22 dolar, 0,28 dolar ve 2 dolar olduğunu tahmin ediyor. Bazı görevlerde Token kullanımı en fazla 30 kat farklılık gösterdi. Hermes en hızlıydı; tek bir görevin medyan süresi 179 saniye idi. Kimi Code için bu süre 297 saniye, Claude Code için ise 348 saniye oldu. Writer'ın başka bir çalışması da benzer sonuçlar verdi. Araştırmacılar, 22 kurumsal görev ve 6 model üzerinde yalnızca çalışma çerçevesini değiştirdiğinde, Token kullanımı %38, tek bir görev maliyeti %41, tamamlama süresi %44 azaldı; tamamlama kalitesi neredeyse aynı kaldı.
Composio, K3'ü Üç Çerçevede Test Ediyor, Token Maliyetleri 9 Kat Kadar Değişiyor
MarsBitPaylaş
Özet
Composio, Kimi K3'ü Kimi Code, Hermes ve Claude Code üzerinde test etti ve 28 aynı görevi çalıştırdı. Başarı oranları benzerdi, ancak token maliyetleri ve süreler farklıydı. Kimi Code, her bir görevde 61.000 token kullandı ve maliyeti $0,22 idi; Claude Code ise her bir görevde 340.000 token harcayarak $2,00 maliyete yol açtı. Bazı görevlerde 30 kat daha fazla token kullanıldı. Hermes, 179 saniyede en hızlı tamamladı. Sonuçlar, AI altyapısı gibi riskli varlıkların yönetimi sırasında CFT uyumluluğunun önemini vurgulamaktadır.
Kaynak:Orijinalini göster
Yasal Uyarı: Bu sayfadaki bilgiler üçüncü şahıslardan alınmış olabilir ve KuCoin'in görüşlerini veya fikirlerini yansıtmayabilir. Bu içerik, herhangi bir beyan veya garanti olmaksızın yalnızca genel bilgilendirme amacıyla sağlanmıştır ve finansal veya yatırım tavsiyesi olarak yorumlanamaz. KuCoin, herhangi bir hata veya eksiklikten veya bu bilgilerin kullanımından kaynaklanan sonuçtan sorumlu değildir.
Dijital varlıklara yapılan yatırımlar riskli olabilir. Lütfen bir ürünün risklerini ve risk toleransınızı kendi finansal koşullarınıza göre dikkatlice değerlendirin. Daha fazla bilgi için lütfen Kullanım Koşullarımıza ve Risk Açıklamamıza bakınız.