Open Source17.11.2026 · 07:001 nguồn

InclusionMed: Benchmark AI cho y tế toàn diện

Từ huggingface.co

Ảnh: huggingface.co
AI;DR

Để thúc đẩy AI y tế hướng tới chăm sóc sức khỏe toàn diện, cần phải đánh giá trên nhiều vai trò y tế, nhiệm vụ và bối cảnh chăm sóc khác nhau, nhưng phạm vi bao phủ của benchmark vẫn chưa đồng đều. Nhóm tác giả giới thiệu InclusionMed, một sáng kiến đánh giá AI y tế mã nguồn mở cho y tế toàn diện. InclusionMed Atlas tổ chức các benchmark theo ba vai trò y tế và ba khả năng AI. Trong đợt phát hành đầu tiên, nhóm tác giả đã chọn bốn benchmark công khai từ 388 ứng viên thông qua các cuộc kiểm tra có cấu trúc và tái lập độc lập. Với InclusionMed-DxFiles, benchmark suy luận chẩn đoán riêng tư của nhóm tác giả, Atlas chứa năm benchmark bao phủ ba trong số chín ô vai trò-khả năng. Nhóm tác giả đã đánh giá các frontier LLM trên Atlas và tổng hợp kết quả của chúng vào InclusionMed Index, với điểm số tổng thể dao động từ 17,5 đến 49,1 trên 100. Index cũng báo cáo điểm số theo vai trò y tế và khả năng AI, cho thấy thứ hạng của một mô hình thay đổi tùy theo vai trò hoặc khả năng được xem xét. Một phân tích trong cùng một benchmark bằng cách sử dụng các thẻ cấp độ nhiệm vụ cho thấy mười mô hình xếp hạng cao nhất trong Index đều đạt điểm cao hơn ở mảng giao tiếp với bệnh nhân so với mảng ra quyết định lâm sàng.

Đọc bài gốcĐăng nhập để góp ý

Nguồn

Bản tin mỗi sáng

Tin quan trọng nhất trong ngày. Miễn phí, hủy bất cứ lúc nào.

Telegram @aihomnay