Composio thử nghiệm Kimi K3 trên 6 khung công tác tác nhân: Claude Code đắt nhất và chậm nhất

Theo giám sát của Beating, công ty cơ sở hạ tầng AI Agent Composio đã mở rộng thử nghiệm, kết nối cùng một mô hình Kimi K3 vào 6 khung Agent và hoàn thành 26 nhiệm vụ giống nhau. So sánh ở đây là các khung chạy, trong khi mô hình nền tảng đều là Kimi K3. Kimi Code hoàn thành 21 nhiệm vụ, đứng đầu. Hermes hoàn thành 20 nhiệm vụ, Pi Agent và Claude Code đều đạt 19 nhiệm vụ, OpenCode đạt 18 nhiệm vụ, Codex đứng cuối với 17 nhiệm vụ. Theo giá chính thức của Kimi K3, Hermes và Pi Agent có chi phí trung bình mỗi nhiệm vụ thấp nhất, lần lượt là 0,39 USD và 0,40 USD. Claude Code đạt 1,47 USD, gấp khoảng 3,8 lần so với Hermes. Pi Agent nhanh nhất, thời gian trung vị cho mỗi nhiệm vụ là 161,7 giây. Claude Code chậm nhất, đạt 347,6 giây. Cùng một mô hình nhưng thay đổi khung, số nhiệm vụ thành công chênh lệch nhiều nhất chỉ 4 nhiệm vụ, nhưng chi phí trung bình chênh lệch gần 4 lần và thời gian chênh lệch hơn 2 lần.