Research23.09.2026 · 12:442 nguồn
Rigel AI đạt hiệu suất Llama 3.2 chỉ với dưới 1% FLOPs
Từ marketbrief.now
Một kiến trúc máy học Mamba-2 lai mới hoạt động với 360 triệu tham số hoạt động để đạt hiệu quả tính toán cao. Mô hình có 2.3 tỷ tham số, được đặt tên là Rigel, đạt kết quả gần với hiệu suất của Llama-3.2-3B của Meta trong khi sử dụng dưới 1% số phép tính số thực cần thiết để huấn luyện mô hình sau, theo nghiên cứu viên Mayank Mish. Mô hình được phát triển mà không cần một cụm tính toán chuyên dụng, dựa trên một cơ sở mã duy nhất để chạy trên các GPU Nvidia H100, A100 và V100 cũng như phần cứng Google TPU v5p và v6e. Sự sử dụng thiết kế Mixture-of-Experts cho phép mô hình giữ chỉ một phần nhỏ các tham số tổng thể hoạt động cho bất kỳ phép tính đơn lẻ nào.
Nguồn
Lịch sử nội dung (2)
- 2026-10-16 · Tóm tắt · vi · Thay nội dung đã lưuKiến trúc học hybrid Mamba-2 mới chỉ dùng 360 triệu tham số hoạt động nhưng vẫn đạt hiệu …Một kiến trúc máy học Mamba-2 lai mới hoạt động với 360 triệu tham số hoạt động để đạt hi…
- 2026-10-16 · Tiêu đề · vi · Thay nội dung đã lưuRigel AI đạt hiệu năng Llama 3.2 với dưới 1% FLOPsRigel AI đạt hiệu suất Llama 3.2 chỉ với dưới 1% FLOPs
Bản tin mỗi sáng
Tin quan trọng nhất trong ngày. Miễn phí, hủy bất cứ lúc nào.
Telegram @aihomnay