Selon le suivi de 1M AI News, le développeur open source Tommaso De Rossi a publié usecomputer, un outil de ligne de commande d'automatisation de bureau écrit en Zig, générant des fichiers binaires natifs sans dépendre de l'environnement d'exécution Node.js, permettant aux assistants de programmation IA (Claude Code, Codex, OpenCode, etc.) de contrôler directement la souris, le clavier et les captures d'écran du bureau. Prise en charge de macOS et Linux (X11, Wayland via compatibilité XWayland).
usecomputer fournit des commandes CLI pour capturer des captures d'écran, déplacer/cliquer/glisser/défiler la souris, saisir au clavier et combiner des raccourcis clavier, accompagnées d'un système de correspondance de coordonnées (coord-map) qui convertit automatiquement les coordonnées en pixels des captures d'écran en coordonnées d'écran réelles. Les captures d'écran sont redimensionnées par défaut pour que le côté le plus long mesure 1568 pixels afin de s'adapter à la fenêtre de contexte du modèle. L'outil prend également en charge le protocole Kitty Graphics ; après configuration de la variable d'environnement, les captures d'écran peuvent être intégrées directement dans le contexte du modèle sans nécessiter de lecture de fichier supplémentaire.
De Rossi a précédemment développé l'outil d'automatisation de navigateur Playwright (plus de 3200 étoiles sur GitHub) ; usecomputer étend l'automatisation du navigateur à l'automatisation de bureau. Le projet a été séparé de son dépôt unique kimaki et propose deux modes d'utilisation : CLI et bibliothèque Node.js. Le README contient des exemples complets d'intégration avec OpenAI computer tool et Anthropic computer use.
Outil CLI usecomputer pour l'automatisation de bureau mis à disposition en open source, compatible avec Claude Code et Codex
KuCoinFlashPartager
Résumé
usecomputer, un outil CLI pour l'automatisation de bureau, a été open-sourcé par le développeur Tommaso De Rossi. Développé en Zig, il permet aux assistants de programmation IA comme Claude Code et Codex de contrôler la souris, le clavier et les captures d'écran. La mise à jour du protocole prend en charge macOS et Linux (X11, Wayland via XWayland), avec des fonctionnalités telles que le mappage des coordonnées et la gestion intégrée des captures d'écran via le protocole Kitty Graphics. Cette actualité IA + crypto marque une avancée dans l'intégration de l'automatisation avec les outils IA.
Source:Afficher l'original
Clause de non-responsabilité : les informations sur cette page peuvent avoir été obtenues auprès de tiers et ne reflètent pas nécessairement les points de vue ou opinions de KuCoin. Ce contenu est fourni à titre informatif uniquement, sans aucune représentation ou garantie d’aucune sorte, et ne doit pas être interprété comme un conseil en investissement. KuCoin ne sera pas responsable des erreurs ou omissions, ni des résultats résultant de l’utilisation de ces informations.
Les investissements dans les actifs numériques peuvent être risqués. Veuillez évaluer soigneusement les risques d’un produit et votre tolérance au risque en fonction de votre propre situation financière. Pour plus d’informations, veuillez consulter nos conditions d’utilisation et divulgation des risques.