1

PANINI-DR: Nghiên cứu chuyên sâu có kiểm soát thông qua Generative Semantic Workspaces

huggingface.co

Nghiên cứu chuyên sâu đòi hỏi việc kết nối nhiều bước tìm kiếm, suy luận và tính toán, trong đó các phát hiện trung gian sẽ dẫn dắt những gì cần điều tra tiếp theo. Khi phạm vi điều tra mở rộng, các agent phải duy trì trạng thái nghiên cứu qua các lần gọi mô hình và kiểm tra các phát hiện trước khi lỗi lan sang các công việc kế tiếp. Chúng tôi giới thiệu PANINI-DR, một multi-agent harness giúp tách biệt việc điều phối cuộc điều tra tổng thể khỏi việc nghiên cứu và xác minh các câu hỏi phụ riêng lẻ. Một không gian làm việc chung, được xây dựng trên biểu diễn Generative Semantic Workspace, sẽ ghi lại các câu hỏi phụ, các phụ thuộc, phát hiện và bằng chứng hỗ trợ. Các nhà nghiên cứu sẽ điều tra từng câu hỏi phụ, trong khi một verification agent riêng biệt sẽ kiểm tra các câu trả lời đề xuất dựa trên các câu hỏi phụ và bằng chứng đó. Phản hồi xác minh sẽ dẫn dắt các bước điều tra tiếp theo, và các phát hiện được ghi lại sẽ cung cấp thông tin cho các nhiệm vụ sau đó. Chúng tôi đánh giá PANINI-DR trên BrowseComp-Plus, FRAMES và MoNaCo so với bảy harness nghiên cứu chuyên sâu tiên tiến nhất, tất cả đều sử dụng chung một backbone language-model và các tập dữ liệu đóng băng. PANINI-DR đạt được hiệu suất trung bình mạnh mẽ nhất trên cả ba benchmark.

Đăng nhập để góp ý

Nguồn chính

  1. SOURCEhuggingface.co
Bản Markdown