OS-Helix: Thống nhất tương tác GUI và thực thi mã trong các agent sử dụng máy tính gốc
OS-Helix: Unifying GUI Interaction and Code Execution in Native Computer-Using Agents
Đoạn trích bài viết
Tự động hóa màn hình máy tính thực tế không hoàn toàn thuần túy về mặt thị giác cũng không thuần túy theo hướng lập trình. Các agent phải hiểu các giao diện hướng tới người dùng trong khi vẫn thao tác hiệu quả với các tệp, tập lệnh và trạng thái hệ thống. Tuy nhiên, sự phối hợp tự nhiên giữa GUI và mã không thể đạt được chỉ bằng việc kết hợp công cụ ở cấp độ lời nhắc.
Toàn văn bài viết
Mở bài viết gốc
Đọc bài viết đầy đủ trên huggingface
Mở bài gốc để xem trọn vẹn chi tiết và dẫn chứng.