VietTechiesHIỂU CÔNG NGHỆ. MỞ GÓC NHÌN.
☰ Chuyên mục

GitHub Copilot Thử Nghiệm Tính Năng Trợ Lý Máy Tính Tự Động Hóa Ứng Dụng

03/10/2026 · VietTechies · Biên tập

Minh họa vector khái niệm với con trỏ kỹ thuật số phát sáng đang tương tác với một phần tử điều khiển tối giản.
Ảnh minh họa do AI tạo.

GitHub vừa giới thiệu bản xem trước công khai (public preview) cho khả năng điều khiển máy tính (computer use) của GitHub Copilot, cho phép công cụ AI này tương tác trực tiếp với các ứng dụng máy tính trên macOS và Windows. Có sẵn thông qua GitHub Copilot CLI và ứng dụng GitHub Copilot độc lập trên máy tính, tính năng này mở rộng khả năng tự động hóa công việc vượt ra ngoài các trình biên tập mã nguồn và môi trường terminal thông thường.

Tự Động Hóa GUI Không Cần API Riêng

Khả năng điều khiển máy tính mới cho phép Copilot thực hiện các thao tác trên giao diện người dùng thay cho lập trình viên. Công cụ có thể đọc ngữ cảnh trực quan và nội dung màn hình, nhập văn bản, kích hoạt các nút điều khiển, nhấp vào các phần tử UI, kéo thả thành phần và quản lý phím bấm qua nhiều bước công việc. Tính năng này hướng tới việc tự động hóa các tác vụ trong các phần mềm cũ hoặc ứng dụng chỉ có giao diện GUI mà không hỗ trợ giao diện dòng lệnh, API hay tích hợp Model Context Protocol.

Kích Hoạt và Tùy Chọn Quản Lý

Lập trình viên có thể bật tính năng này trong GitHub Copilot CLI bằng lệnh /computer on, kiểm tra trạng thái hoạt động với /computer show, hoặc tắt bằng lệnh /computer off. Trong ứng dụng GitHub Copilot trên máy tính, người dùng có thể kích hoạt bằng cách vào Settings và bật tùy chọn tính năng tương ứng.

Các cơ chế an toàn yêu cầu Copilot phải xin phép rõ ràng trước khi chiếm quyền điều khiển một ứng dụng, đồng thời người dùng vẫn giữ quyền xem lại hoặc đặt lại quyền truy cập đối với các ứng dụng đã chọn luôn cho phép. Các tổ chức có thể tắt tính năng điều khiển máy tính này ở cấp cài đặt doanh nghiệp. Trên hệ điều hành macOS, tính năng đòi hỏi phải cấp quyền hệ thống thủ công cho Screen Recording và Accessibility.

Quy Trình Hỗ Trợ và Hạn Chế Vận Hành

Theo GitHub, tính năng điều khiển máy tính đạt hiệu quả cao nhất khi các câu lệnh chỉ định rõ kết quả mong muốn, các ứng dụng liên quan và những ràng buộc vận hành cụ thể. Các trường hợp sử dụng được gợi ý bao gồm tổng hợp tóm tắt thông báo từ trình duyệt web, cập nhật slide trong phần mềm thuyết trình, hoặc chuyển đổi thông tin có cấu trúc qua lại giữa nhiều ứng dụng máy tính.

Ảnh minh họa do AI tạo, không phải ảnh tư liệu.

Nguồn: GitHub Copilot can now interact with desktop apps with computer use