يختبر Composio Kimi K3 على 6 أطر عمل للوكلاء: Claude Code الأكثر تكلفة وأبطأ

وفقًا لمراقبة Beating، قامت شركة البنية التحتية لوكيلات الذكاء الاصطناعي Composio بتوسيع اختبارها من خلال توصيل نفس نموذج Kimi K3 بستة أطر عمل للوكيلات، وأكملت 26 مهمة متطابقة. يتم هنا مقارنة أطر العمل، بينما يكون النموذج الأساسي هو Kimi K3 في جميع الحالات. أكمل Kimi Code 21 مهمة واحتل المرتبة الأولى. وأكمل Hermes 20 مهمة، بينما حقق Pi Agent وClaude Code كل منهما 19 مهمة، وحقق OpenCode 18 مهمة، واحتل Codex المرتبة الأخيرة بـ 17 مهمة. ووفقًا لسعر Kimi K3 الرسمي، فإن Hermes وPi Agent هما الأقل تكلفة في المتوسط لكل مهمة، بـ 0.39 دولار و0.40 دولار على التوالي. ووصلت تكلفة Claude Code إلى 1.47 دولار، أي ما يقرب من 3.8 ضعف تكلفة Hermes. وكان Pi Agent الأسرع، بمتوسط وقت تنفيذ فردي قدره 161.7 ثانية. وكان Claude Code الأبطأ، بـ 347.6 ثانية. وبينما يختلف عدد المهام الناجحة بين الأطر المختلفة لنفس النموذج بأقصى فرق قدره 4 مهام فقط، فإن التكلفة المتوسطة تختلف بأكثر من أربعة أضعاف، والوقت يختلف بأكثر من ضعفين.