RealityBench: Môi trường mô phỏng để đánh giá khả năng mô hình ngôn ngữ thị giác ghi lại công việc thể chất của con người

Đoạn trích bài viết

Tăng cường khả năng của người lao động trong thế giới vật lý thông qua hướng dẫn đã là một mục tiêu kéo dài hàng thập kỷ cho các agent AI. Một khả năng hỗ trợ quan trọng là hiểu những gì người lao động đang làm, nhìn qua máy ảnh của con người hoặc kính thông minh, và hỗ trợ họ trong tài liệu.