Một điểm phân biệt đối xử, hai yếu tố: Làm thế nào giảm thiểu ảnh hưởng đến phân biệt đối xử trong việc đánh giá nhiều lựa chọn
One Bias Score, Two Factors: How Mitigations Affect Option Bias in Multiple-Choice Evaluation
Đoạn trích bài viết
Việc sắp xếp lại các tùy chọn nhiều lựa chọn có thể thay đổi câu trả lời của mô hình, một hiệu ứng được nghiên cứu như sự thiên vị về lựa chọn (một sự ưu tiên cho các chữ cái tùy chọn nhất định) và như sự nhạy cảm của lệnh (sự thay đổi trong câu trả lời trên các lệnh tùy chọn).
Toàn văn bài viết
Mở bài viết gốc
Đọc bài viết đầy đủ trên huggingface
Mở bài gốc để xem trọn vẹn chi tiết và dẫn chứng.