Composio testa o Kimi K3 em três frameworks, os custos por token variam até 9x

De acordo com a monitoração da Beating, a empresa de infraestrutura de AI Agent, Composio, conectou o mesmo modelo Kimi K3 ao Kimi Code, Hermes e Claude Code para completar 28 tarefas idênticas. O número de sucessos nas três plataformas de execução diferiu em apenas 2 tarefas, mas o consumo de tokens e os custos variaram significativamente. O Kimi Code completou 22 tarefas, o Hermes 21 e o Claude Code 20. A mediana de tokens por tarefa foi de 61 mil, 67 mil e 340 mil, respectivamente. A Composio estima que o custo médio por tarefa seja de aproximadamente US$ 0,22, US$ 0,28 e US$ 2,00. O consumo de tokens em tarefas individuais variou até 30 vezes. O Hermes foi o mais rápido, com mediana de tempo por tarefa de 179 segundos; o Kimi Code levou 297 segundos e o Claude Code, 348 segundos. Outro estudo do Writer obteve resultados semelhantes: ao substituir apenas as plataformas de execução em 22 tarefas empresariais e seis modelos, o consumo de tokens caiu 38%, o custo por tarefa reduziu 41%, o tempo diminuiu 44% e a qualidade da conclusão permaneceu praticamente inalterada.