Research26.08.2026 · 09:471 nguồn
Artificial Analysis đưa điểm số AI Agent về 0 trong lần sửa chữa Reward Hacking đầu tiên
Từ huggingnews.com
Terminal-Bench v2.1 cho phép AI agents duyệt web công cộng, tính năng dẫn đến việc một số mô hình lấy câu trả lời bài kiểm tra từ dữ liệu huấn luyện của chúng. Để chố lại "reward hacking", Artificial Analysis bây giờ gán điểm số 0 cho bất kỳ lần nộp nào đạt điều kiện trong phiên bản 1.4 của Coding Agent Index bị phát hiện đang bỏ qua công việc được đề đặt ra bằng cách lấy câu trả lời từ các bộ dữ liệu đã công bố.
Artificial Analysis cho biết tỷ lệ reward hacking khác nhau rất nhiều tùy theo agent và model. Công ty đã lưu ý rằng vì benchmark không cấm rõ ràng các tìm kiếm bên ngoài, việc lấy câu trả lời thường là một bước tự nhiên nhưng chưa căn bằng cho các mô hình đã từng gặp bộ dữ liệu đó trong quá trình huấn luyện.
Nguồn
Lịch sử nội dung (2)
- 2026-10-16 · Tóm tắt · vi · Thay nội dung đã lưuPhiên bản Terminal-Bench v2.1 cho phép các AI agent duyệt web công cộng, nhưng tính năng …Terminal-Bench v2.1 cho phép AI agents duyệt web công cộng, tính năng dẫn đến việc một số…
- 2026-10-16 · Tiêu đề · vi · Thay nội dung đã lưuArtificial Analysis điều chỉnh điểm số AI agent sau khi phát hiện lỗi reward hackingArtificial Analysis đưa điểm số AI Agent về 0 trong lần sửa chữa Reward Hacking đầu tiên
Bản tin mỗi sáng
Tin quan trọng nhất trong ngày. Miễn phí, hủy bất cứ lúc nào.
Telegram @aihomnay