1

Anthropic Haiku 5.5 vượt qua GPT-6 Luna trên mọi benchmark đã công bố

huggingnews.com

Hiệu suất trên bài kiểm tra sử dụng máy tính OSWorld 2.1 đã tăng vọt từ 15,7% đối với Haiku 4.5 lên 72,4% đối với Claude Haiku 5.5, vượt qua mức điểm 48,9% của OpenAI dành cho GPT-6 Luna. Mô hình nhỏ nhất của Anthropic cũng vượt trội hơn GPT-6 Luna về mảng agentic coding, đạt 39,2% trên Terminal-Bench 4.0 so với 16,4% của Luna, đồng thời dẫn đầu về suy luận hình ảnh với 46,4% trên Chartography so với 29,1%. Mô hình này đạt điểm 43 trên Artificial Analysis Intelligence Index, ghi nhận mức tăng 26 điểm so với phiên bản Haiku trước ra mắt cách đây một năm.

Haiku 5.5 sở hữu context window 1M token được mở rộng cùng biểu phí theo tầng, có giá 0,10 USD cho mỗi 1M input token và 0,50 USD cho mỗi 1M output token đối với các prompt dưới 100k, rẻ hơn 90% so với Haiku 4.5. Mức giá này tăng gấp năm lần lên 0,50 USD và 2,50 USD cho các yêu cầu vượt quá 100k token. Dù mô hình này có năng lực cao hơn và tiết kiệm chi phí hơn, Artificial Analysis lưu ý rằng nó dùng lượng output token nhiều hơn khoảng 3 lần so với GPT-6 Luna để đạt được mức điểm số trí tuệ tương tự.

Đăng nhập để góp ý, chỉnh sửa

Nguồn chính

  1. SOURCE@claudeai“Introducing Claude Haiku 5.5: the cheapest, fastest, and most capable small model we’ve ever released”x.com
  2. SUPPORT@mark_k“Agentic coding: 0% → 39.2% on Terminal-Bench 4.0, versus Luna's 16.4%”x.com
  3. SUPPORT@rohanpaul_ai“priced 90% lower than Claude Haiku 4.5 for requests up to 100,000 tokens”x.com
  4. SUPPORT@artificialanlys“Context window: 1 million tokens, up from 200k for Claude 4.5 Haiku”x.com
  5. SUPPORT@kimmonismus“expect it close-ish to Sonnet but far cheaper, probably Luna-pricing”x.com
  6. SUPPORT@ns123abc“haiku 5.5 just dropped and beat it on all 6 benchmarks”x.com
  7. SUPPORT@theo“Charging 1/5th the price for requests under 100k tokens”x.com
  8. SUPPORT@teortaxestex“the deepest product lineup of all labs. Haiku/Sonnet/Opus/Fable + Mythos”x.com
Bản Markdown