Frameworks18.11.2026 · 07:001 nguồn
ForceHarness: Chuyển đổi lực thành hành động và vật lý cho các frozen frontier model
Từ huggingface.co
Các frontier multimodal model hiện đã có thể điều khiển robot zero-shot từ hình ảnh, tuy nhiên nhiều tác vụ thao tác lại phụ thuộc vào lực tiếp xúc mà hình ảnh không thể hiển thị. Việc đưa lực vào một API-only frozen model đặt ra hai thách thức. Thứ nhất, sự tiếp xúc diễn ra nhanh hơn nhiều so với khả năng quyết định của một API model, vì vậy hệ thống phải đóng vòng lặp lực bên dưới mô hình. Thứ hai, một frozen model không thể diễn giải các luồng lực thô, nên lực phải được trả về dưới dạng mà mô hình có thể suy luận. Do đó, nhóm tác giả giới thiệu ForceHarness, một harness cho phép các frozen model sử dụng lực mà không cần minh họa hay fine-tune. Sau khi hiệu chuẩn lực tay từ cảm biến cổ tay hoặc chỉ từ mô-men xoắn khớp, ForceHarness giải quyết thách thức đầu tiên bằng các force primitives tự kết thúc để tự điều chỉnh lực và quay lại khi có sự kiện tiếp xúc. Để giải quyết thách thức thứ hai, một lớp dịch vật lý sẽ chuyển đổi mỗi vết lực thành các đại lượng vật lý kèm theo độ không chắc chắn dưới dạng kết quả công cụ. Để đánh giá ForceHarness so với các bộ điều khiển lực chuyên gia và các chính sách đã học trong cùng điều kiện, nhóm tác giả cũng xây dựng HiddenPhys, một benchmark MuJoCo gồm bảy tác vụ với các biến vật lý ẩn.
Nguồn
Bản tin mỗi sáng
Tin quan trọng nhất trong ngày. Miễn phí, hủy bất cứ lúc nào.
Telegram @aihomnay