Sự tiến hóa của bộ nhớ thời gian thử nghiệm có thể vượt qua việc đào tạo thời gian thử nghiệm cho khám phá khoa học không?
Can Test-Time Memory Evolution Outperform Test-Time Training for Scientific Discovery?
Đoạn trích bài viết
Các khuôn khổ huấn luyện thời gian thử nghiệm (TTT) gần đây đã cho phép các mô hình ngôn ngữ lớn có trọng số mở (LLM) vượt trội hơn các khuôn khổ chỉ dựa trên suy luận được cung cấp bởi các mô hình tiên phong về các nhiệm vụ khám phá khoa học. Tuy nhiên, TTT giới thiệu chi phí tính toán bổ sung cho việc cập nhật trọng số trực tuyến trong quá trình khám phá.
Toàn văn bài viết
Mở bài viết gốc
Đọc bài viết đầy đủ trên huggingface
Mở bài gốc để xem trọn vẹn chi tiết và dẫn chứng.