De acordo com o monitoramento do 1M AI News, o desenvolvedor de código aberto Tommaso De Rossi lançou a ferramenta de linha de comando de automação de desktop usecomputer, escrita em Zig para gerar arquivos binários nativos, sem depender do tempo de execução do Node.js, permitindo que assistentes de programação por IA (Claude Code, Codex, OpenCode, etc.) controlem diretamente o mouse, o teclado e as capturas de tela do desktop. Suporta macOS e Linux (X11, Wayland compatível por meio do XWayland).
usecomputer fornece comandos CLI para captura de tela, movimento/clicar/arrastar/rolar do mouse, entrada de teclado e combinação de atalhos, com um sistema de mapeamento de coordenadas (coord-map) que converte automaticamente coordenadas de pixels na captura de tela em coordenadas de tela reais. A saída da captura de tela redimensiona automaticamente o lado mais longo para 1568 pixels para se adequar à janela de contexto do modelo. A ferramenta também suporta o Kitty Graphics Protocol; após definir a variável de ambiente, as capturas de tela podem ser incorporadas diretamente ao contexto do modelo, sem necessidade de leitura adicional de arquivos.
De Rossi anteriormente desenvolveu a ferramenta de automação de navegador Playwright (3200+ estrelas no GitHub); usecomputer estende a automação de navegador para automação de desktop. O projeto foi separado do repositório único kimaki e oferece duas formas de uso: CLI e biblioteca Node.js. O README inclui exemplos completos de integração com OpenAI computer tool e Anthropic computer use.
Ferramenta CLI usecomputer para automação de desktop lançada como código aberto, compatível com Claude Code e Codex
KuCoinFlashCompartilhar
Resumo
usecomputer, uma ferramenta CLI para automação de desktop, foi aberta pelo desenvolvedor Tommaso De Rossi. Desenvolvida em Zig, permite que assistentes de programação por IA, como Claude Code e Codex, controlem o mouse, o teclado e capturas de tela. A atualização do protocolo suporta macOS e Linux (X11, Wayland via XWayland), com recursos como mapeamento de coordenadas e manipulação inline de capturas de tela através do Kitty Graphics Protocol. Esta notícia de IA + criptomoeda marca um passo adiante na integração de automação com ferramentas de IA.
Fonte:Mostrar original
Aviso legal: as informações nesta página podem ter sido obtidas de terceiros e não refletem necessariamente os pontos de vista ou opiniões da KuCoin. Este conteúdo é fornecido apenas para fins informativos gerais, sem qualquer representação ou garantia de qualquer tipo, nem deve ser interpretado como aconselhamento financeiro ou de investimento. A KuCoin não é responsável por quaisquer erros ou omissões, ou por quaisquer resultados do uso destas informações.
Os investimentos em ativos digitais podem ser arriscados. Avalie cuidadosamente os riscos de um produto e a sua tolerância ao risco com base nas suas próprias circunstâncias financeiras. Para mais informações, consulte nossos termos de uso e divulgação de risco.