AIME 2025
AIME 2025 (American Invitational Mathematics Examination, edycja 2025) to oficjalny konkurs matematyczny MAA — etap pomiędzy AMC 12 a olimpiadą USAMO. W ocenie modeli używa się łącznie 30 zadań z obu arkuszy (AIME I i AIME II): każdy arkusz to 15 zadań, na które odpowiedzią jest liczba całkowita od 000 do 999, wpisywana bez kalkulatora w ciągu 3 godzin.
Jak liczony jest wynik
Odpowiedź modelu (po ekstrakcji liczby) porównuje się z kluczem przez exact match: liczy się tylko idealna zgodność liczby — bez punktów częściowych. Wynik to liczba (lub odsetek) poprawnie rozwiązanych zadań z 30.
Czym się wyróżnia
Zadania AIME wymagają wieloetapowego rozumowania matematycznego (algebra, kombinatoryka, teoria liczb, geometria), a nie tylko wiedzy. Odpowiedź numeryczna czyni test w pełni automatycznym i odpornym na „zgadywanie" w stylu testów wyboru — dlatego AIME stał się standardowym testem zdolności matematycznych i rozumowania modeli.
Główny scorer
Scorery używane w tym benchmarku
Źródła
- Leaderboard AIME 2025 (Artificial Analysis)(stan na 2026-10-10)
- MAA American Mathematics Competitions — oficjalna strona konkursu (AIME)(stan na 2026-10-10)
- simple-evals (GitHub, OpenAI) — implementacja ewaluacji AIME 2025 (aime25)(stan na 2026-10-10)
- Zbiór danych aimo-validation-aime (Hugging Face Datasets)(stan na 2026-10-10)