● Research03.11.2026 · 04:408 nguồn
Gpt-6 astra chỉnh sửa neural weights nâng điểm math của Qwen lên 48,1%
Theo marketbrief.now
Các nhà nghiên cứu tại MIT CSAIL đã chứng minh một phương pháp để một mô hình AI frontier chẩn đoán và sửa lỗi logic cơ bản của một mạng neural khác bằng cách đọc và ghi trực tiếp các weights của nó. Dùng kỹ thuật gọi là Weight-Space Programming, nhóm đã dùng GPT-6 Astra để xác định và loại bỏ các reasoning loops trong mô hình Qwen3.5-0.8B. Astra phân tích weights để tìm tín hiệu gây lặp lại và chỉnh sửa 131.000 weights trong hai lớp MLP, nâng điểm MATH-500 của mô hình mục tiêu từ 7,9% lên 48,1% mà không cần dùng gradient truyền thống hay huấn luyện lại. Các thí nghiệm được thực hiện với ngân sách 50 forward passes trên các bài tập thực hành và tốn khoảng 1.000 USD. Ngoài việc sửa lỗi, các nhà nghiên cứu nhận thấy Astra có thể phân biệt các mạng được huấn luyện trên các tác vụ khác nhau như Pacman so với Pong chỉ bằng cách xem xét các ma trận weights. Dù một số người quan sát ngành mô tả kết quả là những "dấu hiệu sự sống" ban đầu thay vì một thay đổi lớn, khả năng này gợi ý một con đường tự cải thiện đệ quy cho AI mà không cần chi phí compute cao khi khởi chạy các job huấn luyện mới.
Nguồn
+ 7 nguồn khác
- SUPPORT@rikiyatakehi“With a budget of 50 forward passes on practice problems, it located the cause and edited it out.”x.com
- SUPPORT@xennygrimmato_“Astra compared activations on looping vs. normal traces, found the direction that separates them, and edited 131k weights in two MLP layers to push against it.”x.com
- SUPPORT@timdarcet“We asked GPT-6 Astra to edit Qwen3.5-0.8B weights to improve math.”x.com
- SUPPORT@paul_cal“It can differentiate a neural net trained on pacman from one trained on pong, or space invaders, just by reading the weights.”x.com
- SUPPORT@teortaxestex“not as insane as it sounds from "Astra directly edited 131K weights", this is somewhat basic surgery humans can do too”x.com
- SUPPORT@willdepue“tldr very much signs of life but nothing super dramatic”x.com
- SUPPORT@tszzl“designed and not grown”x.com