Hermes Agent ra mắt điều khiển máy tính macOS với mức giảm 95% sử dụng token

Theo giám sát của Beating, Hermes Agent của Nous Research đã chính thức ra mắt tính năng điều khiển máy tính macOS (Computer Use). Tính năng này trực tiếp cạnh tranh với “điều khiển nền” của OpenAI Codex. Nền tảng của nó tích hợp cua-driver – trình điều khiển mã nguồn mở đã được kênh này báo cáo trước đó – thông qua việc đảo ngược API riêng của Apple để gửi trực tiếp lệnh điều khiển đến tiến trình mục tiêu. Điều này có nghĩa là khi Agent đang tìm email hoặc gõ mã ở nền, chuột vật lý của người dùng sẽ không nhảy lung tung và tiêu điểm cửa sổ hiện tại sẽ không bị chiếm đoạt, giúp con người và máy tính cùng hoạt động trên một máy tính mà không làm phiền lẫn nhau. Do điều khiển máy tính phụ thuộc nặng vào chụp màn hình liên tục, hóa đơn Token thường tăng vọt nhanh chóng. Hermes đã triển khai một cơ chế nén bốn lớp ở cấp khung: loại bỏ bắt buộc các khung hình thừa, chỉ giữ lại 3 ảnh chụp gần nhất trong bộ nhớ mô hình, đồng thời kết hợp xóa bộ nhớ đệm cũ trên máy chủ. Theo tính toán chính thức, khi thực hiện liên tục 20 bước thao tác ở độ phân giải 1568×900, lượng Token tiêu thụ có thể giảm từ khoảng 600.000 xuống còn khoảng 30.000.