ChainCatcherの情報によると、独立開発者Yetoneが主導して開発したローカルAIエージェントAlmaは、AIエージェントインフラ企業Runtaが実施した最新の比較評価で、タスク成功率と成功あたりのコストの両方で3位となり、Claude CodeやOpenCodeなどのツールを上回りました。現在のランキングスナップショットでは、Almaのタスク成功率は72.7％で、Codex CLIの77.9％とPiの72.8％に次いでいます。Claude Codeは70.0％です。Almaは1つのタスクを成功させるのに平均約0.80ドルかかり、Claude Codeは0.94ドルで、コストは約16％低いです。今回のFrontierHarness v1.1は、同じ大規模モデルを異なるエージェント実行フレームワークで比較したもので、21のHarness設定、5つの大規模モデル、62のタスクをカバーし、各タスクは4回繰り返され、合計26,040回の実行が計画されています。規模は前回版の72倍です。すべてのツールは統一されたクラウド環境で実行され、タスク成功率、トークンコスト、実行速度が比較されました。Almaはローカル実行と長期記憶を主な特徴としており、コードの読み取り・修正、ターミナルコマンドの実行、ウェブ検索をサポートし、SkillsとMCPにも対応しています。また、下層モデルを切り替えることも可能です。Almaは最近Herdrと統合され、Claude Code、Codex、PiなどのプログラミングエージェントはHerdr内で引き続き実行でき、Almaによって同一のチャットインターフェースに集約され、実行プロセスの確認、質問への回答、操作の承認が可能になります。ユーザーはiPhoneを通じてPC上の複数のエージェントをリモートで管理することもできます。現在の評価はまだ終了しておらず、ランキングは変動する可能性があります。今回の評価対象モデルはGLM、DeepSeek、Kimi、Museなどのオープンソースモデルに限定されており、GPTやClaudeシリーズなどのプロプライエタリモデルは含まれていません。
Almaはタスク成功率とコストにおいてClaude Codeを上回りました
Chaincatcher共有
概要
RuntaのFrontierHarness v1.1ベンチマークによると、Almaはタスク成功率とコスト効率でClaude Codeを上回りました。Yetoneが開発したAlmaは、62のタスクで合計26,040回の実行を行い、成功率72.7％、1タスクあたり平均コスト$0.80を達成し、Claude Codeより16％安くなりました。Almaはローカル実行、コード編集をサポートし、Herdrと統合されています。暗号資産市場が依然として変動が激しい中、開発者は感情の変化を示す指標としてフィア＆グリードインデックスを注目しています。
出典:原文を表示
免責事項: 本ページの情報はサードパーティからのものであり、必ずしもKuCoinの見解や意見を反映しているわけではありません。この内容は一般的な情報提供のみを目的として提供されており、いかなる種類の表明や保証もなく、金融または投資助言として解釈されるものでもありません。KuCoinは誤記や脱落、またはこの情報の使用に起因するいかなる結果に対しても責任を負いません。
デジタル資産への投資にはリスクが伴います。商品のリスクとリスク許容度をご自身の財務状況に基づいて慎重に評価してください。詳しくは利用規約およびリスク開示を参照してください。