swebench-verified

v1.0

A human-validated subset of 500 SWE-bench tasks

harbor run -d swebench-verified@1.0

Tasks (500)

django__django-13128
harbor run -d swebench-verified@1.0 -t django__django-13128
417efcc
django__django-13158
harbor run -d swebench-verified@1.0 -t django__django-13158
417efcc
django__django-13195
harbor run -d swebench-verified@1.0 -t django__django-13195
417efcc
django__django-13212
harbor run -d swebench-verified@1.0 -t django__django-13212
417efcc
django__django-13279
harbor run -d swebench-verified@1.0 -t django__django-13279
417efcc
django__django-13297
harbor run -d swebench-verified@1.0 -t django__django-13297
417efcc
django__django-13315
harbor run -d swebench-verified@1.0 -t django__django-13315
417efcc
django__django-13343
harbor run -d swebench-verified@1.0 -t django__django-13343
417efcc
django__django-13344
harbor run -d swebench-verified@1.0 -t django__django-13344
417efcc
django__django-13346
harbor run -d swebench-verified@1.0 -t django__django-13346
417efcc
django__django-13363
harbor run -d swebench-verified@1.0 -t django__django-13363
417efcc
django__django-13401
harbor run -d swebench-verified@1.0 -t django__django-13401
417efcc
django__django-13406
harbor run -d swebench-verified@1.0 -t django__django-13406
417efcc
django__django-13410
harbor run -d swebench-verified@1.0 -t django__django-13410
417efcc
django__django-13417
harbor run -d swebench-verified@1.0 -t django__django-13417
417efcc
django__django-13449
harbor run -d swebench-verified@1.0 -t django__django-13449
417efcc
django__django-13512
harbor run -d swebench-verified@1.0 -t django__django-13512
417efcc
django__django-13513
harbor run -d swebench-verified@1.0 -t django__django-13513
417efcc
django__django-13516
harbor run -d swebench-verified@1.0 -t django__django-13516
417efcc
django__django-13551
harbor run -d swebench-verified@1.0 -t django__django-13551
417efcc
django__django-13568
harbor run -d swebench-verified@1.0 -t django__django-13568
417efcc
django__django-13569
harbor run -d swebench-verified@1.0 -t django__django-13569
417efcc
django__django-13590
harbor run -d swebench-verified@1.0 -t django__django-13590
417efcc
django__django-13658
harbor run -d swebench-verified@1.0 -t django__django-13658
417efcc
django__django-13670
harbor run -d swebench-verified@1.0 -t django__django-13670
417efcc
django__django-13741
harbor run -d swebench-verified@1.0 -t django__django-13741
417efcc
django__django-13786
harbor run -d swebench-verified@1.0 -t django__django-13786
417efcc
django__django-13794
harbor run -d swebench-verified@1.0 -t django__django-13794
417efcc
django__django-13807
harbor run -d swebench-verified@1.0 -t django__django-13807
417efcc
django__django-13809
harbor run -d swebench-verified@1.0 -t django__django-13809
417efcc
django__django-13810
harbor run -d swebench-verified@1.0 -t django__django-13810
417efcc
django__django-13820
harbor run -d swebench-verified@1.0 -t django__django-13820
417efcc
django__django-13821
harbor run -d swebench-verified@1.0 -t django__django-13821
417efcc
django__django-13837
harbor run -d swebench-verified@1.0 -t django__django-13837
417efcc
django__django-13925
harbor run -d swebench-verified@1.0 -t django__django-13925
417efcc
django__django-13933
harbor run -d swebench-verified@1.0 -t django__django-13933
417efcc
django__django-13964
harbor run -d swebench-verified@1.0 -t django__django-13964
417efcc
django__django-14007
harbor run -d swebench-verified@1.0 -t django__django-14007
417efcc
django__django-14011
harbor run -d swebench-verified@1.0 -t django__django-14011
417efcc
django__django-14017
harbor run -d swebench-verified@1.0 -t django__django-14017
417efcc
django__django-14034
harbor run -d swebench-verified@1.0 -t django__django-14034
417efcc
django__django-14053
harbor run -d swebench-verified@1.0 -t django__django-14053
417efcc
django__django-14089
harbor run -d swebench-verified@1.0 -t django__django-14089
417efcc
django__django-14122
harbor run -d swebench-verified@1.0 -t django__django-14122
417efcc
django__django-14140
harbor run -d swebench-verified@1.0 -t django__django-14140
417efcc
django__django-14155
harbor run -d swebench-verified@1.0 -t django__django-14155
417efcc
django__django-14170
harbor run -d swebench-verified@1.0 -t django__django-14170
417efcc
django__django-14238
harbor run -d swebench-verified@1.0 -t django__django-14238
417efcc
django__django-14311
harbor run -d swebench-verified@1.0 -t django__django-14311
417efcc
django__django-14315
harbor run -d swebench-verified@1.0 -t django__django-14315
417efcc
django__django-14349
harbor run -d swebench-verified@1.0 -t django__django-14349
417efcc
django__django-14351
harbor run -d swebench-verified@1.0 -t django__django-14351
417efcc
django__django-14373
harbor run -d swebench-verified@1.0 -t django__django-14373
417efcc
django__django-14376
harbor run -d swebench-verified@1.0 -t django__django-14376
417efcc
django__django-14404
harbor run -d swebench-verified@1.0 -t django__django-14404
417efcc
django__django-14434
harbor run -d swebench-verified@1.0 -t django__django-14434
417efcc
django__django-14493
harbor run -d swebench-verified@1.0 -t django__django-14493
417efcc
django__django-14500
harbor run -d swebench-verified@1.0 -t django__django-14500
417efcc
django__django-14534
harbor run -d swebench-verified@1.0 -t django__django-14534
417efcc
django__django-14539
harbor run -d swebench-verified@1.0 -t django__django-14539
417efcc
django__django-14559
harbor run -d swebench-verified@1.0 -t django__django-14559
417efcc
django__django-14580
harbor run -d swebench-verified@1.0 -t django__django-14580
417efcc
django__django-14608
harbor run -d swebench-verified@1.0 -t django__django-14608
417efcc
django__django-14631
harbor run -d swebench-verified@1.0 -t django__django-14631
417efcc
django__django-14672
harbor run -d swebench-verified@1.0 -t django__django-14672
417efcc
django__django-14725
harbor run -d swebench-verified@1.0 -t django__django-14725
417efcc
django__django-14752
harbor run -d swebench-verified@1.0 -t django__django-14752
417efcc
django__django-14765
harbor run -d swebench-verified@1.0 -t django__django-14765
417efcc
django__django-14771
harbor run -d swebench-verified@1.0 -t django__django-14771
417efcc
django__django-14787
harbor run -d swebench-verified@1.0 -t django__django-14787
417efcc
django__django-14792
harbor run -d swebench-verified@1.0 -t django__django-14792
417efcc
django__django-14855
harbor run -d swebench-verified@1.0 -t django__django-14855
417efcc
django__django-14915
harbor run -d swebench-verified@1.0 -t django__django-14915
417efcc
django__django-14999
harbor run -d swebench-verified@1.0 -t django__django-14999
417efcc
django__django-15022
harbor run -d swebench-verified@1.0 -t django__django-15022
417efcc
django__django-15037
harbor run -d swebench-verified@1.0 -t django__django-15037
417efcc
django__django-15098
harbor run -d swebench-verified@1.0 -t django__django-15098
417efcc
django__django-15103
harbor run -d swebench-verified@1.0 -t django__django-15103
417efcc
django__django-15104
harbor run -d swebench-verified@1.0 -t django__django-15104
417efcc
django__django-15127
harbor run -d swebench-verified@1.0 -t django__django-15127
417efcc
django__django-15128
harbor run -d swebench-verified@1.0 -t django__django-15128
417efcc
django__django-15161
harbor run -d swebench-verified@1.0 -t django__django-15161
417efcc
django__django-15252
harbor run -d swebench-verified@1.0 -t django__django-15252
417efcc
django__django-15268
harbor run -d swebench-verified@1.0 -t django__django-15268
417efcc
django__django-15277
harbor run -d swebench-verified@1.0 -t django__django-15277
417efcc
django__django-15278
harbor run -d swebench-verified@1.0 -t django__django-15278
417efcc
django__django-15280
harbor run -d swebench-verified@1.0 -t django__django-15280
417efcc
django__django-15315
harbor run -d swebench-verified@1.0 -t django__django-15315
417efcc
django__django-15368
harbor run -d swebench-verified@1.0 -t django__django-15368
417efcc
django__django-15375
harbor run -d swebench-verified@1.0 -t django__django-15375
417efcc
django__django-15380
harbor run -d swebench-verified@1.0 -t django__django-15380
417efcc
django__django-15382
harbor run -d swebench-verified@1.0 -t django__django-15382
417efcc
django__django-15467
harbor run -d swebench-verified@1.0 -t django__django-15467
417efcc
django__django-15499
harbor run -d swebench-verified@1.0 -t django__django-15499
417efcc
django__django-15503
harbor run -d swebench-verified@1.0 -t django__django-15503
417efcc
django__django-15525
harbor run -d swebench-verified@1.0 -t django__django-15525
417efcc
django__django-15554
harbor run -d swebench-verified@1.0 -t django__django-15554
417efcc
django__django-15561
harbor run -d swebench-verified@1.0 -t django__django-15561
417efcc
django__django-15563
harbor run -d swebench-verified@1.0 -t django__django-15563
417efcc
django__django-15569
harbor run -d swebench-verified@1.0 -t django__django-15569
417efcc