Products11.09.2026 · 08:22
Show HN: Benzi – A Code Intelligence/Harness Beating Claude Code and CodeGraph
Từ benzi.fly.dev
So sánh công bằng: Benzi harness so với các harness phổ biến, 24 vấn đề GitHub, 10 ngôn ngữ. Benzi harness trên SWE-bench Verified. 82.4% trong 500 vấn đề thực tế được giải quyết với chi phí 3.1¢ cho mỗi lỗi. So sánh công bằng: Trí tuệ mã của CodeGraph so với trí tuệ mã AI-native của Benzi. Mỗi nhiệm vụ, mỗi lần thử, nguyên văn — không giữ lại gì. Tìm hiểu thêm về Benzi: varianttech.net/about. Mỗi harness mở nguồn thêm khi lỗi ngày càng khó. Câu hỏi là độ dốc. Mỗi điểm là một lỗi; 24 lỗi được sắp xếp từ dễ đến khó, từ trái sang phải. Độ khó là số lượt của Claude Code trên lỗi đó — một số liệu đo đạc bên thứ ba, vì vậy không harness nào tự đặt vị trí của mình trên trục. Số dòng đọc chỉ tính những gì trả về từ các lời gọi đọc tệp; đầu ra grep và shell là tìm kiếm, không phải đọc. Số liệu bên cạnh mỗi đường là độ dốc: số dòng thêm mà harness mở ra cho mỗi bước tăng độ khó. Di chuột lên bất kỳ điểm nào để xem lỗi và số lượt của nó. Số dòng đọc chỉ tính những gì trả về từ các lời gọi đọc tệp; đầu ra grep và shell là tìm kiếm, không phải đọc. Số xanh lá trong mỗi hàng là thấp nhất trong bốn số. Cùng 24 lỗi ở cùng thứ tự, với thời gian thực thay thế cho số dòng đọc. Thời gian thực ở đây là số liệu thô — khác với các bảng trên, chỉ số xây dựng kho chứa repo của Benzi không được trừ đi, vì vậy những giây này chạy cao hơn một chút so với các con số ấm nóng được nói đến khác trên trang này. Mỗi điểm là lần chạy giải quyết gần nhất của harness đó cho lỗi đó; các lần chạy chưa giải quyết hoặc chưa hoàn thành được bỏ qua thay vì được vẽ dưới dạng nhanh.
Nguồn
+ 1 nguồn khác
- THẢO LUẬNtweedler290news.ycombinator.com
Lịch sử nội dung (1)
- 2026-10-16 · Tóm tắt · vi · Thay nội dung đã lưuBenzi là một công cụ trí tuệ lập trình mới, được phát triển dựa trên kiến trúc Code Intel…So sánh công bằng: Benzi harness so với các harness phổ biến, 24 vấn đề GitHub, 10 ngôn n…
Bản tin mỗi sáng
Tin quan trọng nhất trong ngày. Miễn phí, hủy bất cứ lúc nào.
Telegram @aihomnay