Research16.11.2026 · 12:001 nguồn

Khi nào LLM agent nên quên

Từ arxiv.org

Ảnh: arxiv.org
AI;DR

Các hệ thống bộ nhớ LLM thường xóa các sự kiện được phân loại là lỗi thời. Nhóm tác giả chỉ ra rằng bước lọc cứng này có thể làm giảm độ chính xác ở các bước sau khi lỗi resolver xóa các sự kiện quan trọng đối với truy vấn. Trên ba model, can thiệp độ nhạy có kiểm soát dịch chuyển việc loại bỏ cứng từ mức tăng +0,186 lên +0,230 ở độ phân giải hoàn hảo, và từ mức giảm -0,176 đến -0,181 ở độ tin cậy thấp nhất được thử nghiệm. Các can thiệp mục tiêu kết hợp cho thấy việc loại bỏ sai gây suy giảm lớn hơn đáng kể so với việc giữ lại sai, trong khi một baseline không xóa vẫn có thể thất bại khi các nhãn không chính xác dẫn dắt quá trình tạo sinh. Trên bộ phân chia hiệu chuẩn/thử nghiệm 102/102 cố định, một cổng khớp với triển khai đơn giản đạt độ chính xác 0,655 so với 0,641 cho việc luôn loại bỏ cứng và 0,662 cho việc chọn oracle dựa trên thông tin thử nghiệm. Các điểm giao độ chính xác toàn cục đòi hỏi nhãn vàng và là chẩn đoán cụ thể theo model và tác vụ, không phải ngưỡng triển khai. Việc xóa nên được xem xét theo chi phí: xác thực rủi ro loại bỏ sai quan trọng đối với truy vấn trên dữ liệu khớp, hoặc mặc định giữ lại không cần nhãn khi không có xác thực như vậy.

Đọc bài gốcĐăng nhập để góp ý

Nguồn

Bản tin mỗi sáng

Tin quan trọng nhất trong ngày. Miễn phí, hủy bất cứ lúc nào.

Telegram @aihomnay