ตามการติดตามของ 1M AI News นักพัฒนาแบบเปิดแหล่งที่มา Tommaso De Rossi ได้เปิดตัวเครื่องมือบรรทัดคำสั่งอัตโนมัติสำหรับเดสก์ท็อปชื่อ usecomputer ซึ่งเขียนด้วย Zig เพื่อสร้างไฟล์ไบนารีแบบเนทีฟ โดยไม่ต้องพึ่งพา runtime ของ Node.js ทำให้ผู้ช่วยการเขียนโปรแกรม AI (เช่น Claude Code, Codex, OpenCode ฯลฯ) สามารถควบคุมเมาส์ คีย์บอร์ด และถ่ายหน้าจอบนเดสก์ท็อปได้โดยตรง รองรับ macOS และ Linux (X11, Wayland ผ่านความเข้ากันได้ของ XWayland)
usecomputer ให้คำสั่ง CLI สำหรับการถ่ายภาพหน้าจอ การเคลื่อนไหว/คลิก/ลาก/เลื่อนเมาส์ การป้อนข้อมูลแป้นพิมพ์ และการรวมปุ่มลัด พร้อมระบบแมปพิกเซล (coord-map) ที่แปลงพิกเซลจากภาพหน้าจอเป็นพิกเซลบนหน้าจอจริงโดยอัตโนมัติ ภาพหน้าจอจะถูกปรับขนาดให้ด้านที่ยาวที่สุดเป็น 1568 พิกเซลเพื่อให้เหมาะกับหน้าต่างบริบทของโมเดล ยังรองรับ Kitty Graphics Protocol เมื่อตั้งค่าตัวแปรสภาพแวดล้อม ภาพหน้าจอสามารถแสดงแบบผนวกภายในบริบทของโมเดลได้ทันที โดยไม่จำเป็นต้องอ่านไฟล์เพิ่มเติม
De Rossi ก่อนหน้านี้พัฒนาเครื่องมืออัตโนมัติเบราว์เซอร์ชื่อ Playwright (มีดาวบน GitHub มากกว่า 3,200 ดวง) โดย usecomputer ขยายจากอัตโนมัติเบราว์เซอร์ไปสู่อัตโนมัติเดสก์ท็อป โครงการนี้ถูกแยกออกมาจากที่เก็บเดียวของ kimaki และรองรับการใช้งานผ่าน CLI และไลบรารี Node.js พร้อมตัวอย่างการผสานรวมอย่างสมบูรณ์สำหรับ OpenAI computer tool และ Anthropic computer use ในไฟล์ README
ใช้เครื่องมือ CLI ของ computer สำหรับอัตโนมัติบนเดสก์ท็อป ที่เปิดซอร์สโค้ดแล้ว และรองรับ Claude Code และ Codex
KuCoinFlashแชร์
สรุป
usecomputer ซึ่งเป็นเครื่องมือ CLI สำหรับอัตโนมัติบนเดสก์ท็อป ได้รับการเปิดซอร์สโดยนักพัฒนา Tommaso De Rossi สร้างด้วย Zig ช่วยให้ผู้ช่วยโปรแกรม AI เช่น Claude Code และ Codex สามารถควบคุมเมาส์ คีย์บอร์ด และภาพหน้าจอได้ การอัปเดตโปรโตคอลรองรับ macOS และ Linux (X11, Wayland ผ่าน XWayland) พร้อมฟีเจอร์เช่น การแมปพิกัดและการจัดการภาพหน้าจอแบบเรียบง่ายผ่าน Kitty Graphics Protocol ข่าว AI + คริปโตนี้ถือเป็นก้าวสำคัญในการผสานการอัตโนมัติกับเครื่องมือ AI
แหล่งที่มา:แสดงต้นฉบับ
คำปฏิเสธความรับผิดชอบ: ข้อมูลในหน้านี้อาจได้รับจากบุคคลที่สาม และไม่จำเป็นต้องสะท้อนถึงมุมมองหรือความคิดเห็นของ KuCoin เนื้อหานี้จัดทำขึ้นเพื่อวัตถุประสงค์ในการให้ข้อมูลทั่วไปเท่านั้น โดยไม่มีการรับรองหรือการรับประกัน และจะไม่ถูกตีความว่าเป็นคำแนะนำทางการเงินหรือการลงทุน KuCoin จะไม่รับผิดชอบต่อความผิดพลาดหรือการละเว้นในเนื้อหา หรือผลลัพธ์ใดๆ ที่เกิดจากการใช้ข้อมูลนี้
การลงทุนในสินทรัพย์ดิจิทัลอาจมีความเสี่ยง โปรดประเมินความเสี่ยงของผลิตภัณฑ์และความเสี่ยงที่คุณยอมรับได้อย่างรอบคอบตามสถานการณ์ทางการเงินของคุณเอง โปรดดูข้อมูลเพิ่มเติมได้ที่ข้อกำหนดการใช้งานและเอกสารเปิดเผยข้อมูลความเสี่ยงของเรา