ChainThink message, July 30, ang AI Agent infrastructure company na Composio ay nag-connect ng parehong Kimi K3 sa Kimi Code, Hermes, at Claude Code upang isagawa ang 28 na parehong gawain.
Ang bilang ng mga natapos na operasyonal na framework ay 22, 21, at 20, kung saan ang pagkakaiba ay maliit, ngunit ang pagkakaiba sa paggamit at gastos ng Token ay malinaw.
Ang mga pagsubok ay nagpakita na ang median na Token para sa mga окрем na gawain para sa Kimi Code, Hermes, at Claude Code ay 61,000, 67,000, at 340,000, ayon sa pagkakasunod-sunod;
Ipinagkakaloob ng Composio na ang average na gastos bawat gawain ay halos $0.22, $0.28, at $2. Ang pagkakaiba sa paggamit ng Token ay maaaring umabot sa 30 beses sa bawat gawain.
Sa aspeto ng bilis, ang median na oras para sa isang single task ni Hermes ay 179 segundo, si Kimi Code ay 297 segundo, at si Claude Code ay 348 segundo.
Ipinaliwanag din ng isa pang pag-aaral ni Writer na sa 22 mga corporate task at 6 na models, ang pagpapalit lamang ng runtime framework ay nagresulta sa 38% pagbaba sa paggamit ng Token, 41% pagbaba sa cost bawat gawain, 44% pagbaba sa oras, at halos parehong kalidad ng pagkumpleto.
