Тест фреймворку агента Kimi K3 показує, що Claude Code найдорожчий і найповільніший

iconChainthink
Поділитися
AI summary iconКороткий зміст
Composio протестував Kimi K3 у шести агентських фреймворках, виконавши 26 ідентичних завдань. Kimi Code показав найкращий результат — 21 завдання, Hermes — 20, Pi Agent і Claude Code — по 19 кожен, тоді як OpenCode і Codex завершили 18 і 17 відповідно. Hermes і Pi Agent мали найнижчу вартість — $0,39 і $0,40 за завдання, порівняно з $1,47 для Claude Code. За швидкістю Pi Agent у середньому витрачав 161,7 секунди, тоді як Claude Code — 347,6. Результати підкреслюють різницю в продуктивності та вартості в межах фреймворку відповідності. Ліквідність та криптовалютні ринки можуть вигоду від таких оптимізованих агентських систем.

ChainThink повідомляє, 1 серпня компанія Composio, інфраструктурна компанія для AI Agent, розширила тестування, підключивши той самий Kimi K3 до шести рамок Agent і виконавши 26 однакових завдань.

Об’єктом порівняння є рамки виконання, базова модель — Kimi K3. Результати тестування показали, що Kimi Code виконала 21 завдання і посіла перше місце; Hermes виконала 20 завдань;

Pi Agent та Claude Code завершили по 19 завдань; OpenCode — 18; Codex — 17.

За офіційною ціною Kimi K3, Hermes і Pi Agent мають найнижчу середню вартість за завдання — відповідно 0,39 долара США і 0,40 долара США;

Claude Code коштує 1,47 долара США, що приблизно в 3,8 раза більше, ніж Hermes. Щодо швидкості, медіанний час виконання однієї задачі Pi Agent становить 161,7 секунди, а Claude Code — 347,6 секунди.

Тестування показало, що при зміні фреймворку в межах однієї моделі кількість успішних завдань відрізняється максимум на 4, середня вартість — майже в 4 рази, а час виконання — більше ніж у 2 рази.

Джерело:Показати оригінал
Відмова від відповідальності: Інформація на цій сторінці може бути отримана від третіх осіб і не обов'язково відображає погляди або думки KuCoin. Цей контент надається лише для загального інформування, без будь-яких запевнень або гарантій, а також не може розглядатися як фінансова або інвестиційна порада. KuCoin не несе відповідальності за будь-які помилки або упущення, а також за будь-які результати, отримані в результаті використання цієї інформації. Інвестиції в цифрові активи можуть бути ризикованими. Будь ласка, ретельно оцініть ризики продукту та свою толерантність до ризику, виходячи з ваших власних фінансових обставин. Для отримання додаткової інформації, будь ласка, зверніться до наших Умов використання та Розкриття інформації про ризики.