aime
v1.0American Invitational Mathematics Examination (AIME) benchmark for evaluating mathematical reasoning and problem-solving capabilities. Contains 60 competition-level mathematics problems from AIME 2024, 2025-I, and 2025-II competitions.
harbor run -d aime@1.0Tasks (60)
aime_60
harbor run -d aime@1.0 -t aime_60414014c
aime_61
harbor run -d aime@1.0 -t aime_61414014c
aime_62
harbor run -d aime@1.0 -t aime_62414014c
aime_63
harbor run -d aime@1.0 -t aime_63414014c
aime_64
harbor run -d aime@1.0 -t aime_64414014c
aime_65
harbor run -d aime@1.0 -t aime_65414014c
aime_66
harbor run -d aime@1.0 -t aime_66414014c
aime_67
harbor run -d aime@1.0 -t aime_67414014c
aime_68
harbor run -d aime@1.0 -t aime_68414014c
aime_69
harbor run -d aime@1.0 -t aime_69414014c
aime_70
harbor run -d aime@1.0 -t aime_70414014c
aime_71
harbor run -d aime@1.0 -t aime_71414014c
aime_72
harbor run -d aime@1.0 -t aime_72414014c
aime_73
harbor run -d aime@1.0 -t aime_73414014c
aime_74
harbor run -d aime@1.0 -t aime_74414014c
aime_75
harbor run -d aime@1.0 -t aime_75414014c
aime_76
harbor run -d aime@1.0 -t aime_76414014c
aime_77
harbor run -d aime@1.0 -t aime_77414014c
aime_78
harbor run -d aime@1.0 -t aime_78414014c
aime_79
harbor run -d aime@1.0 -t aime_79414014c
aime_80
harbor run -d aime@1.0 -t aime_80414014c
aime_81
harbor run -d aime@1.0 -t aime_81414014c
aime_82
harbor run -d aime@1.0 -t aime_82414014c
aime_83
harbor run -d aime@1.0 -t aime_83414014c
aime_84
harbor run -d aime@1.0 -t aime_84414014c
aime_85
harbor run -d aime@1.0 -t aime_85414014c
aime_86
harbor run -d aime@1.0 -t aime_86414014c
aime_87
harbor run -d aime@1.0 -t aime_87414014c
aime_88
harbor run -d aime@1.0 -t aime_88414014c
aime_89
harbor run -d aime@1.0 -t aime_89414014c
aime_i-1
harbor run -d aime@1.0 -t aime_i-1414014c
aime_i-10
harbor run -d aime@1.0 -t aime_i-10414014c
aime_i-11
harbor run -d aime@1.0 -t aime_i-11414014c
aime_i-12
harbor run -d aime@1.0 -t aime_i-12414014c
aime_i-13
harbor run -d aime@1.0 -t aime_i-13414014c
aime_i-14
harbor run -d aime@1.0 -t aime_i-14414014c
aime_i-15
harbor run -d aime@1.0 -t aime_i-15414014c
aime_i-2
harbor run -d aime@1.0 -t aime_i-2414014c
aime_i-3
harbor run -d aime@1.0 -t aime_i-3414014c
aime_i-4
harbor run -d aime@1.0 -t aime_i-4414014c
aime_i-5
harbor run -d aime@1.0 -t aime_i-5414014c
aime_i-6
harbor run -d aime@1.0 -t aime_i-6414014c
aime_i-7
harbor run -d aime@1.0 -t aime_i-7414014c
aime_i-8
harbor run -d aime@1.0 -t aime_i-8414014c
aime_i-9
harbor run -d aime@1.0 -t aime_i-9414014c
aime_ii-1
harbor run -d aime@1.0 -t aime_ii-1414014c
aime_ii-10
harbor run -d aime@1.0 -t aime_ii-10414014c
aime_ii-11
harbor run -d aime@1.0 -t aime_ii-11414014c
aime_ii-12
harbor run -d aime@1.0 -t aime_ii-12414014c
aime_ii-13
harbor run -d aime@1.0 -t aime_ii-13414014c
aime_ii-14
harbor run -d aime@1.0 -t aime_ii-14414014c
aime_ii-15
harbor run -d aime@1.0 -t aime_ii-15414014c
aime_ii-2
harbor run -d aime@1.0 -t aime_ii-2414014c
aime_ii-3
harbor run -d aime@1.0 -t aime_ii-3414014c
aime_ii-4
harbor run -d aime@1.0 -t aime_ii-4414014c
aime_ii-5
harbor run -d aime@1.0 -t aime_ii-5414014c
aime_ii-6
harbor run -d aime@1.0 -t aime_ii-6414014c
aime_ii-7
harbor run -d aime@1.0 -t aime_ii-7414014c
aime_ii-8
harbor run -d aime@1.0 -t aime_ii-8414014c
aime_ii-9
harbor run -d aime@1.0 -t aime_ii-9414014c