Alma supera a Claude Code en tasa de éxito y costo

iconChaincatcher
Compartir
AI summary iconResumen
Alma supera a Claude Code en tasa de éxito y eficiencia de costos, según el benchmark FrontierHarness v1.1 de Runta. Desarrollada por Yetone, Alma logró una tasa de éxito del 72,7% con un costo promedio de $0,80 por tarea, un 16% más barata que Claude Code. La prueba incluyó 26.040 ejecuciones en 62 tareas. Alma admite ejecución local, edición de código e integración con Herdr. Mientras el mercado de criptomonedas permanece volátil, los desarrolladores siguen de cerca el índice de miedo y codicia en busca de señales de cambio en el sentimiento.

ChainCatcher informa que Alma, un agente de IA local desarrollado por el desarrollador independiente Yetone, obtuvo el tercer lugar en la última evaluación impulsada por Runta, una empresa de infraestructura de agentes de IA, en términos de tasa de aprobación de tareas y costo de éxito, superando a herramientas como Claude Code y OpenCode. La instantánea actual del ranking muestra que Alma tiene una tasa de aprobación de tareas del 72,7%, detrás de Codex CLI (77,9%) y Pi (72,8%), mientras que Claude Code alcanza el 70,0%. Alma gasta aproximadamente $0,80 por tarea completada con éxito, frente a los $0,94 de Claude Code, lo que representa un ahorro de costos de aproximadamente un 16%. Esta evaluación de FrontierHarness v1.1 compara el rendimiento del mismo modelo grande bajo diferentes marcos de ejecución de agentes, abarcando 21 configuraciones de Harness, 5 modelos grandes y 62 tareas, cada una repetida 4 veces, con un total planeado de 26.040 ejecuciones, 72 veces el tamaño de la versión anterior. Todas las herramientas se ejecutaron en un entorno en la nube unificado, evaluando la tasa de éxito de las tareas, el costo en tokens y la velocidad de ejecución. Alma se enfoca en ejecución local y memoria a largo plazo, permitiendo leer y modificar código, ejecutar comandos de terminal, buscar en la web, y soporta Skills y MCP, además de permitir cambiar el modelo subyacente. Recientemente, Alma se integró con Herdr, permitiendo que agentes de programación como Claude Code, Codex y Pi continúen ejecutándose dentro de Herdr, mientras Alma centraliza su ejecución, respuestas y aprobaciones en una única interfaz de chat. Los usuarios también pueden gestionar remotamente múltiples agentes en sus computadoras desde un iPhone. La evaluación aún no ha finalizado y los rankings pueden cambiar; los modelos participantes están limitados a modelos abiertos como GLM, DeepSeek, Kimi y Muse, sin incluir modelos propietarios como GPT y la serie Claude.

Descargo de responsabilidad: La información contenida en esta página puede proceder de terceros y no refleja necesariamente los puntos de vista u opiniones de KuCoin. Este contenido se proporciona solo con fines informativos generales, sin ninguna representación o garantía de ningún tipo, y tampoco debe interpretarse como asesoramiento financiero o de inversión. KuCoin no es responsable de ningún error u omisión, ni de ningún resultado derivado del uso de esta información. Las inversiones en activos digitales pueden ser arriesgadas. Evalúa con cuidado los riesgos de un producto y tu tolerancia al riesgo en función de tus propias circunstancias financieras. Para más información, consulta nuestras Condiciones de uso y la Declaración de riesgos.