Тест фреймворка агента Kimi K3 показал, что Claude Code самый дорогой и самый медленный

iconChainthink
Поделиться
AI summary iconСводка
Composio протестировала Kimi K3 на шести агентских фреймворках, выполнив 26 идентичных задач. Kimi Code лидировала с 21 задачей, Hermes — с 20, Pi Agent и Claude Code — по 19 каждая, а OpenCode и Codex завершили 18 и 17 задач соответственно. Hermes и Pi Agent показали наименьшую стоимость — $0,39 и $0,40 за задачу, в сравнении с $1,47 у Claude Code. По скорости Pi Agent в среднем справился за 161,7 секунды, тогда как Claude Code потратил 347,6 секунды. Результаты подчеркивают различия в производительности и стоимости в рамках комплаенс-фреймворка. Ликвидность и криптовалютные рынки могут извлечь выгоду из таких оптимизированных агентных систем.

ChainThink сообщает, 1 августа компания Composio, инфраструктурный провайдер AI Agent, расширила тестирование, подключив ту же самую модель Kimi K3 к шести платформам Agent и выполнив 26 одинаковых задач.

Сравнение проводилось по фреймворкам, базовые модели у всех — Kimi K3. Результаты тестирования показали, что Kimi Code выполнил 21 задачу и занял первое место; Hermes выполнил 20 задач;

Pi Agent и Claude Code выполнили по 19 задач; OpenCode — 18; Codex — 17.

Согласно официальной цене Kimi K3, Hermes и Pi Agent имеют наименьшую среднюю стоимость за задачу — 0,39 доллара и 0,40 доллара соответственно;

Claude Code стоит 1,47 доллара США, что примерно в 3,8 раза больше, чем у Hermes. По скорости, медианное время выполнения одиночной задачи Pi Agent составляет 161,7 секунды, а у Claude Code — 347,6 секунды.

Тесты показали, что при смене фреймворка в одной и той же модели количество успешных задач различается максимум на 4, средняя стоимость отличается почти в 4 раза, а время выполнения — более чем в 2 раза.

Источник:Показать оригинал
Отказ от ответственности: Информация на этой странице может быть получена от третьих лиц и не обязательно отражает взгляды или мнения KuCoin. Данный контент предоставляется исключительно в общих информационных целях, без каких-либо заверений или гарантий, а также не может быть истолкован как финансовый или инвестиционный совет. KuCoin не несет ответственности за ошибки или упущения, а также за любые результаты, полученные в результате использования этой информации. Инвестиции в цифровые активы могут быть рискованными. Пожалуйста, тщательно оценивайте риски, связанные с продуктом, и свою устойчивость к риску, исходя из собственных финансовых обстоятельств. Для получения более подробной информации, пожалуйста, ознакомьтесь с нашими Условиями использования и Уведомлением о риске.