Benchmark

Software engineering benchmark that measures real repository issue resolution.

Kärkitulos 80,6 %
Mediaani 73,3 %
Tuloshaitari 70,8 % - 80,6 %

Tulostaulukko

Näytä myös vanhat mallit (22)

Oletuksena mukana ovat vain ajantasaiset julkiset mallit. Avaa halutessasi myös vanhemmat ja poistuvat rivit.

SijaMalliTulosLähde
#1
Gemini 3.1 Pro Google DeepMind
80,6 % Google · Päivitetty 21.3.2026
#2
Claude Haiku 4.5 Anthropic
73,3 % Anthropic · Päivitetty 21.3.2026
#370,8 % xAI · Päivitetty 21.3.2026

Tietoa benchmarkista

Päivitetty
21.3.2026

Testi