swtbench-verified

v1.0

SWTBench Verified - Software Testing Benchmark for code generation

harbor run -d swtbench-verified@1.0

Tasks (433)

django__django-13406
harbor run -d swtbench-verified@1.0 -t django__django-13406
e39578f
django__django-13410
harbor run -d swtbench-verified@1.0 -t django__django-13410
e39578f
django__django-13417
harbor run -d swtbench-verified@1.0 -t django__django-13417
e39578f
django__django-13449
harbor run -d swtbench-verified@1.0 -t django__django-13449
e39578f
django__django-13512
harbor run -d swtbench-verified@1.0 -t django__django-13512
e39578f
django__django-13513
harbor run -d swtbench-verified@1.0 -t django__django-13513
e39578f
django__django-13516
harbor run -d swtbench-verified@1.0 -t django__django-13516
e39578f
django__django-13551
harbor run -d swtbench-verified@1.0 -t django__django-13551
e39578f
django__django-13568
harbor run -d swtbench-verified@1.0 -t django__django-13568
e39578f
django__django-13569
harbor run -d swtbench-verified@1.0 -t django__django-13569
e39578f
django__django-13590
harbor run -d swtbench-verified@1.0 -t django__django-13590
e39578f
django__django-13670
harbor run -d swtbench-verified@1.0 -t django__django-13670
e39578f
django__django-13741
harbor run -d swtbench-verified@1.0 -t django__django-13741
e39578f
django__django-13786
harbor run -d swtbench-verified@1.0 -t django__django-13786
e39578f
django__django-13794
harbor run -d swtbench-verified@1.0 -t django__django-13794
e39578f
django__django-13807
harbor run -d swtbench-verified@1.0 -t django__django-13807
e39578f
django__django-13809
harbor run -d swtbench-verified@1.0 -t django__django-13809
e39578f
django__django-13810
harbor run -d swtbench-verified@1.0 -t django__django-13810
e39578f
django__django-13820
harbor run -d swtbench-verified@1.0 -t django__django-13820
e39578f
django__django-13821
harbor run -d swtbench-verified@1.0 -t django__django-13821
e39578f
django__django-13837
harbor run -d swtbench-verified@1.0 -t django__django-13837
e39578f
django__django-13925
harbor run -d swtbench-verified@1.0 -t django__django-13925
e39578f
django__django-13933
harbor run -d swtbench-verified@1.0 -t django__django-13933
e39578f
django__django-13964
harbor run -d swtbench-verified@1.0 -t django__django-13964
e39578f
django__django-14017
harbor run -d swtbench-verified@1.0 -t django__django-14017
e39578f
django__django-14034
harbor run -d swtbench-verified@1.0 -t django__django-14034
e39578f
django__django-14053
harbor run -d swtbench-verified@1.0 -t django__django-14053
e39578f
django__django-14089
harbor run -d swtbench-verified@1.0 -t django__django-14089
e39578f
django__django-14122
harbor run -d swtbench-verified@1.0 -t django__django-14122
e39578f
django__django-14140
harbor run -d swtbench-verified@1.0 -t django__django-14140
e39578f
django__django-14155
harbor run -d swtbench-verified@1.0 -t django__django-14155
e39578f
django__django-14170
harbor run -d swtbench-verified@1.0 -t django__django-14170
e39578f
django__django-14238
harbor run -d swtbench-verified@1.0 -t django__django-14238
e39578f
django__django-14311
harbor run -d swtbench-verified@1.0 -t django__django-14311
e39578f
django__django-14315
harbor run -d swtbench-verified@1.0 -t django__django-14315
e39578f
django__django-14351
harbor run -d swtbench-verified@1.0 -t django__django-14351
e39578f
django__django-14373
harbor run -d swtbench-verified@1.0 -t django__django-14373
e39578f
django__django-14376
harbor run -d swtbench-verified@1.0 -t django__django-14376
e39578f
django__django-14404
harbor run -d swtbench-verified@1.0 -t django__django-14404
e39578f
django__django-14434
harbor run -d swtbench-verified@1.0 -t django__django-14434
e39578f
django__django-14493
harbor run -d swtbench-verified@1.0 -t django__django-14493
e39578f
django__django-14500
harbor run -d swtbench-verified@1.0 -t django__django-14500
e39578f
django__django-14534
harbor run -d swtbench-verified@1.0 -t django__django-14534
e39578f
django__django-14539
harbor run -d swtbench-verified@1.0 -t django__django-14539
e39578f
django__django-14559
harbor run -d swtbench-verified@1.0 -t django__django-14559
e39578f
django__django-14580
harbor run -d swtbench-verified@1.0 -t django__django-14580
e39578f
django__django-14608
harbor run -d swtbench-verified@1.0 -t django__django-14608
e39578f
django__django-14631
harbor run -d swtbench-verified@1.0 -t django__django-14631
e39578f
django__django-14672
harbor run -d swtbench-verified@1.0 -t django__django-14672
e39578f
django__django-14725
harbor run -d swtbench-verified@1.0 -t django__django-14725
e39578f
django__django-14752
harbor run -d swtbench-verified@1.0 -t django__django-14752
e39578f
django__django-14765
harbor run -d swtbench-verified@1.0 -t django__django-14765
e39578f
django__django-14771
harbor run -d swtbench-verified@1.0 -t django__django-14771
e39578f
django__django-14787
harbor run -d swtbench-verified@1.0 -t django__django-14787
e39578f
django__django-14792
harbor run -d swtbench-verified@1.0 -t django__django-14792
e39578f
django__django-14855
harbor run -d swtbench-verified@1.0 -t django__django-14855
e39578f
django__django-14915
harbor run -d swtbench-verified@1.0 -t django__django-14915
e39578f
django__django-14999
harbor run -d swtbench-verified@1.0 -t django__django-14999
e39578f
django__django-15022
harbor run -d swtbench-verified@1.0 -t django__django-15022
e39578f
django__django-15037
harbor run -d swtbench-verified@1.0 -t django__django-15037
e39578f
django__django-15098
harbor run -d swtbench-verified@1.0 -t django__django-15098
e39578f
django__django-15103
harbor run -d swtbench-verified@1.0 -t django__django-15103
e39578f
django__django-15104
harbor run -d swtbench-verified@1.0 -t django__django-15104
e39578f
django__django-15127
harbor run -d swtbench-verified@1.0 -t django__django-15127
e39578f
django__django-15128
harbor run -d swtbench-verified@1.0 -t django__django-15128
e39578f
django__django-15161
harbor run -d swtbench-verified@1.0 -t django__django-15161
e39578f
django__django-15252
harbor run -d swtbench-verified@1.0 -t django__django-15252
e39578f
django__django-15268
harbor run -d swtbench-verified@1.0 -t django__django-15268
e39578f
django__django-15277
harbor run -d swtbench-verified@1.0 -t django__django-15277
e39578f
django__django-15278
harbor run -d swtbench-verified@1.0 -t django__django-15278
e39578f
django__django-15280
harbor run -d swtbench-verified@1.0 -t django__django-15280
e39578f
django__django-15315
harbor run -d swtbench-verified@1.0 -t django__django-15315
e39578f
django__django-15368
harbor run -d swtbench-verified@1.0 -t django__django-15368
e39578f
django__django-15375
harbor run -d swtbench-verified@1.0 -t django__django-15375
e39578f
django__django-15380
harbor run -d swtbench-verified@1.0 -t django__django-15380
e39578f
django__django-15382
harbor run -d swtbench-verified@1.0 -t django__django-15382
e39578f
django__django-15467
harbor run -d swtbench-verified@1.0 -t django__django-15467
e39578f
django__django-15499
harbor run -d swtbench-verified@1.0 -t django__django-15499
e39578f
django__django-15503
harbor run -d swtbench-verified@1.0 -t django__django-15503
e39578f
django__django-15525
harbor run -d swtbench-verified@1.0 -t django__django-15525
e39578f
django__django-15554
harbor run -d swtbench-verified@1.0 -t django__django-15554
e39578f
django__django-15561
harbor run -d swtbench-verified@1.0 -t django__django-15561
e39578f
django__django-15563
harbor run -d swtbench-verified@1.0 -t django__django-15563
e39578f
django__django-15569
harbor run -d swtbench-verified@1.0 -t django__django-15569
e39578f
django__django-15572
harbor run -d swtbench-verified@1.0 -t django__django-15572
e39578f
django__django-15629
harbor run -d swtbench-verified@1.0 -t django__django-15629
e39578f
django__django-15695
harbor run -d swtbench-verified@1.0 -t django__django-15695
e39578f
django__django-15731
harbor run -d swtbench-verified@1.0 -t django__django-15731
e39578f
django__django-15732
harbor run -d swtbench-verified@1.0 -t django__django-15732
e39578f
django__django-15741
harbor run -d swtbench-verified@1.0 -t django__django-15741
e39578f
django__django-15814
harbor run -d swtbench-verified@1.0 -t django__django-15814
e39578f
django__django-15851
harbor run -d swtbench-verified@1.0 -t django__django-15851
e39578f
django__django-15863
harbor run -d swtbench-verified@1.0 -t django__django-15863
e39578f
django__django-15916
harbor run -d swtbench-verified@1.0 -t django__django-15916
e39578f
django__django-15930
harbor run -d swtbench-verified@1.0 -t django__django-15930
e39578f
django__django-15957
harbor run -d swtbench-verified@1.0 -t django__django-15957
e39578f
django__django-15973
harbor run -d swtbench-verified@1.0 -t django__django-15973
e39578f
django__django-16032
harbor run -d swtbench-verified@1.0 -t django__django-16032
e39578f
django__django-16082
harbor run -d swtbench-verified@1.0 -t django__django-16082
e39578f
django__django-16100
harbor run -d swtbench-verified@1.0 -t django__django-16100
e39578f