ChainThink का संदेश, 30 जुलाई, AI एजेंट इंफ्रास्ट्रक्चर कंपनी Composio ने Kimi Code, Hermes और Claude Code में एक ही Kimi K3 को जोड़कर 28 समान कार्यों को निष्पादित किया।
तीन ऑपरेशन फ्रेमवर्क्स के पूर्ण होने की संख्या क्रमशः 22, 21 और 20 है, जिसमें अंतर थोड़ा है, लेकिन टोकन उपयोग और लागत में स्पष्ट अंतर है।
टेस्टिंग द्वारा पाया गया कि किमी कोड, हर्मीस और क्लॉड कोड के एकल कार्य टोकन की माध्यिका क्रमशः 61,000, 67,000 और 340,000 है;
Composio के अनुसार, प्रत्येक कार्य की औसत लागत लगभग 0.22 डॉलर, 0.28 डॉलर और 2 डॉलर है। व्यक्तिगत कार्यों में टोकन उपयोग में अधिकतम 30 गुना का अंतर हो सकता है।
स्पीड के मामले में, Hermes के लिए एकल कार्य का माध्यिका समय 179 सेकंड है, Kimi Code के लिए 297 सेकंड है, और Claude Code के लिए 348 सेकंड है।
व्राइटर के एक अन्य अध्ययन में भी दिखाया गया है कि 22 कार्यों और 6 मॉडलों पर केवल रनिंग फ्रेमवर्क को बदलने से टोकन उपयोग में 38% की कमी, प्रति इकाई लागत में 41% की कमी, समय में 44% की कमी हुई, जबकि पूरा किए गए कार्य की गुणवत्ता लगभग समान रही।