● AgentsNov 8, 2026 · 16:501 source

AI coding agents still need human cleanup on nearly three out of four tasks in a real-world test

From the-decoder.com

AI;DR

In a real-world test using Alibaba's Co-Design Bench, AI coding agents required human cleanup on nearly three out of four tasks. The top performer, GPT-6 Astra, fully solved only 26.4 percent of tasks, despite scoring above 99 percent on older benchmarks.

Read originalSign in to suggest

Sources

#openai#agentMarkdown
Content history (3)
  • 2026-11-08 · Summary · vi · Replaced stored text
    Trong một thử nghiệm thực tế, các AI agent hỗ trợ lập trình vẫn cần con người can thiệp đ…
    Co-Design Bench, một benchmark dành cho coding-agent mới của Alibaba, kiểm tra các AI age…
  • 2026-11-08 · Title · vi · Replaced stored text
    Các AI agent lập trình vẫn cần con người chỉnh sửa trong gần 3 trên 4 tác vụ tại thử nghi…
    AI coding agent vẫn cần con người chỉnh sửa trong gần 3 trên 4 tác vụ tại thử nghiệm thực…
  • 2026-11-08 · Summary · vi · Replaced stored text
    Trong một thử nghiệm thực tế, các AI agent hỗ trợ lập trình vẫn cần con người can thiệp đ…
    Trong một thử nghiệm thực tế, các AI agent hỗ trợ lập trình vẫn cần con người can thiệp đ…
Score 3.41.5k tokens
Image: the-decoder.com
Read original