ai·radar
Bản tin sáng Tra cứu

Phản hồi tự tạo gây mất ổn định đào tạo thời gian thử nghiệm: Sự phân hủy nguyên nhân của việc thích nghi theo đường dài

Self-Generated Feedback Destabilizes Test-Time Training: A Causal Decomposition of Long-Horizon Adaptation

Đoạn trích bài viết

Việc huấn luyện thời gian thử nghiệm (TTT) cho phép mô hình lưu trữ thông tin trong trọng số của nó trong quá trình suy luận. Tuy nhiên, khi mô hình học hỏi từ đầu ra của riêng mình, mỗi bản cập nhật cũng thay đổi mô hình tạo ra ví dụ huấn luyện tiếp theo.

Toàn văn bài viết

Đọc bài viết đầy đủ trên huggingface

Mở bài gốc để xem trọn vẹn chi tiết và dẫn chứng.

Mở bài viết gốc