dabstep

v1.0

DABstep: Data Agent Benchmark for Multi-step Reasoning. 450 tasks where agents analyze payment transaction data with Python/pandas to answer business questions.

uvx harbor run -d dabstep@1.0

Tasks (450)

dabstep-1780
uvx harbor run -d dabstep@1.0 -t dabstep-1780
e25eec6
dabstep-1784
uvx harbor run -d dabstep@1.0 -t dabstep-1784
e25eec6
dabstep-1789
uvx harbor run -d dabstep@1.0 -t dabstep-1789
e25eec6
dabstep-1791
uvx harbor run -d dabstep@1.0 -t dabstep-1791
e25eec6
dabstep-1799
uvx harbor run -d dabstep@1.0 -t dabstep-1799
e25eec6
dabstep-18
uvx harbor run -d dabstep@1.0 -t dabstep-18
e25eec6
dabstep-1801
uvx harbor run -d dabstep@1.0 -t dabstep-1801
e25eec6
dabstep-1805
uvx harbor run -d dabstep@1.0 -t dabstep-1805
e25eec6
dabstep-1808
uvx harbor run -d dabstep@1.0 -t dabstep-1808
e25eec6
dabstep-1810
uvx harbor run -d dabstep@1.0 -t dabstep-1810
e25eec6
dabstep-1817
uvx harbor run -d dabstep@1.0 -t dabstep-1817
e25eec6
dabstep-1818
uvx harbor run -d dabstep@1.0 -t dabstep-1818
e25eec6
dabstep-1819
uvx harbor run -d dabstep@1.0 -t dabstep-1819
e25eec6
dabstep-1822
uvx harbor run -d dabstep@1.0 -t dabstep-1822
e25eec6
dabstep-1823
uvx harbor run -d dabstep@1.0 -t dabstep-1823
e25eec6
dabstep-1826
uvx harbor run -d dabstep@1.0 -t dabstep-1826
e25eec6
dabstep-1829
uvx harbor run -d dabstep@1.0 -t dabstep-1829
e25eec6
dabstep-1834
uvx harbor run -d dabstep@1.0 -t dabstep-1834
e25eec6
dabstep-1835
uvx harbor run -d dabstep@1.0 -t dabstep-1835
e25eec6
dabstep-1837
uvx harbor run -d dabstep@1.0 -t dabstep-1837
e25eec6
dabstep-1840
uvx harbor run -d dabstep@1.0 -t dabstep-1840
e25eec6
dabstep-1841
uvx harbor run -d dabstep@1.0 -t dabstep-1841
e25eec6
dabstep-1846
uvx harbor run -d dabstep@1.0 -t dabstep-1846
e25eec6
dabstep-1851
uvx harbor run -d dabstep@1.0 -t dabstep-1851
e25eec6
dabstep-1853
uvx harbor run -d dabstep@1.0 -t dabstep-1853
e25eec6
dabstep-1857
uvx harbor run -d dabstep@1.0 -t dabstep-1857
e25eec6
dabstep-1861
uvx harbor run -d dabstep@1.0 -t dabstep-1861
e25eec6
dabstep-1862
uvx harbor run -d dabstep@1.0 -t dabstep-1862
e25eec6
dabstep-1866
uvx harbor run -d dabstep@1.0 -t dabstep-1866
e25eec6
dabstep-1868
uvx harbor run -d dabstep@1.0 -t dabstep-1868
e25eec6
dabstep-1875
uvx harbor run -d dabstep@1.0 -t dabstep-1875
e25eec6
dabstep-1892
uvx harbor run -d dabstep@1.0 -t dabstep-1892
e25eec6
dabstep-19
uvx harbor run -d dabstep@1.0 -t dabstep-19
e25eec6
dabstep-1931
uvx harbor run -d dabstep@1.0 -t dabstep-1931
e25eec6
dabstep-1966
uvx harbor run -d dabstep@1.0 -t dabstep-1966
e25eec6
dabstep-2
uvx harbor run -d dabstep@1.0 -t dabstep-2
e25eec6
dabstep-20
uvx harbor run -d dabstep@1.0 -t dabstep-20
e25eec6
dabstep-2057
uvx harbor run -d dabstep@1.0 -t dabstep-2057
e25eec6
dabstep-21
uvx harbor run -d dabstep@1.0 -t dabstep-21
e25eec6
dabstep-2121
uvx harbor run -d dabstep@1.0 -t dabstep-2121
e25eec6
dabstep-2132
uvx harbor run -d dabstep@1.0 -t dabstep-2132
e25eec6
dabstep-22
uvx harbor run -d dabstep@1.0 -t dabstep-22
e25eec6
dabstep-2229
uvx harbor run -d dabstep@1.0 -t dabstep-2229
e25eec6
dabstep-2264
uvx harbor run -d dabstep@1.0 -t dabstep-2264
e25eec6
dabstep-23
uvx harbor run -d dabstep@1.0 -t dabstep-23
e25eec6
dabstep-2316
uvx harbor run -d dabstep@1.0 -t dabstep-2316
e25eec6
dabstep-2366
uvx harbor run -d dabstep@1.0 -t dabstep-2366
e25eec6
dabstep-2385
uvx harbor run -d dabstep@1.0 -t dabstep-2385
e25eec6
dabstep-2397
uvx harbor run -d dabstep@1.0 -t dabstep-2397
e25eec6
dabstep-24
uvx harbor run -d dabstep@1.0 -t dabstep-24
e25eec6
dabstep-2404
uvx harbor run -d dabstep@1.0 -t dabstep-2404
e25eec6
dabstep-2407
uvx harbor run -d dabstep@1.0 -t dabstep-2407
e25eec6
dabstep-2412
uvx harbor run -d dabstep@1.0 -t dabstep-2412
e25eec6
dabstep-2419
uvx harbor run -d dabstep@1.0 -t dabstep-2419
e25eec6
dabstep-2439
uvx harbor run -d dabstep@1.0 -t dabstep-2439
e25eec6
dabstep-2441
uvx harbor run -d dabstep@1.0 -t dabstep-2441
e25eec6
dabstep-2463
uvx harbor run -d dabstep@1.0 -t dabstep-2463
e25eec6
dabstep-2477
uvx harbor run -d dabstep@1.0 -t dabstep-2477
e25eec6
dabstep-2478
uvx harbor run -d dabstep@1.0 -t dabstep-2478
e25eec6
dabstep-2480
uvx harbor run -d dabstep@1.0 -t dabstep-2480
e25eec6
dabstep-2481
uvx harbor run -d dabstep@1.0 -t dabstep-2481
e25eec6
dabstep-2482
uvx harbor run -d dabstep@1.0 -t dabstep-2482
e25eec6
dabstep-2484
uvx harbor run -d dabstep@1.0 -t dabstep-2484
e25eec6
dabstep-2485
uvx harbor run -d dabstep@1.0 -t dabstep-2485
e25eec6
dabstep-2489
uvx harbor run -d dabstep@1.0 -t dabstep-2489
e25eec6
dabstep-2490
uvx harbor run -d dabstep@1.0 -t dabstep-2490
e25eec6
dabstep-2491
uvx harbor run -d dabstep@1.0 -t dabstep-2491
e25eec6
dabstep-2493
uvx harbor run -d dabstep@1.0 -t dabstep-2493
e25eec6
dabstep-2494
uvx harbor run -d dabstep@1.0 -t dabstep-2494
e25eec6
dabstep-2496
uvx harbor run -d dabstep@1.0 -t dabstep-2496
e25eec6
dabstep-2499
uvx harbor run -d dabstep@1.0 -t dabstep-2499
e25eec6
dabstep-25
uvx harbor run -d dabstep@1.0 -t dabstep-25
e25eec6
dabstep-2506
uvx harbor run -d dabstep@1.0 -t dabstep-2506
e25eec6
dabstep-2507
uvx harbor run -d dabstep@1.0 -t dabstep-2507
e25eec6
dabstep-2509
uvx harbor run -d dabstep@1.0 -t dabstep-2509
e25eec6
dabstep-2511
uvx harbor run -d dabstep@1.0 -t dabstep-2511
e25eec6
dabstep-2518
uvx harbor run -d dabstep@1.0 -t dabstep-2518
e25eec6
dabstep-2520
uvx harbor run -d dabstep@1.0 -t dabstep-2520
e25eec6
dabstep-2521
uvx harbor run -d dabstep@1.0 -t dabstep-2521
e25eec6
dabstep-2522
uvx harbor run -d dabstep@1.0 -t dabstep-2522
e25eec6
dabstep-2523
uvx harbor run -d dabstep@1.0 -t dabstep-2523
e25eec6
dabstep-2524
uvx harbor run -d dabstep@1.0 -t dabstep-2524
e25eec6
dabstep-2525
uvx harbor run -d dabstep@1.0 -t dabstep-2525
e25eec6
dabstep-2526
uvx harbor run -d dabstep@1.0 -t dabstep-2526
e25eec6
dabstep-2527
uvx harbor run -d dabstep@1.0 -t dabstep-2527
e25eec6
dabstep-2528
uvx harbor run -d dabstep@1.0 -t dabstep-2528
e25eec6
dabstep-2529
uvx harbor run -d dabstep@1.0 -t dabstep-2529
e25eec6
dabstep-2530
uvx harbor run -d dabstep@1.0 -t dabstep-2530
e25eec6
dabstep-2532
uvx harbor run -d dabstep@1.0 -t dabstep-2532
e25eec6
dabstep-2533
uvx harbor run -d dabstep@1.0 -t dabstep-2533
e25eec6
dabstep-2534
uvx harbor run -d dabstep@1.0 -t dabstep-2534
e25eec6
dabstep-2535
uvx harbor run -d dabstep@1.0 -t dabstep-2535
e25eec6
dabstep-2536
uvx harbor run -d dabstep@1.0 -t dabstep-2536
e25eec6
dabstep-2537
uvx harbor run -d dabstep@1.0 -t dabstep-2537
e25eec6
dabstep-2538
uvx harbor run -d dabstep@1.0 -t dabstep-2538
e25eec6
dabstep-2539
uvx harbor run -d dabstep@1.0 -t dabstep-2539
e25eec6
dabstep-2543
uvx harbor run -d dabstep@1.0 -t dabstep-2543
e25eec6
dabstep-2544
uvx harbor run -d dabstep@1.0 -t dabstep-2544
e25eec6
dabstep-2545
uvx harbor run -d dabstep@1.0 -t dabstep-2545
e25eec6
dabstep-2546
uvx harbor run -d dabstep@1.0 -t dabstep-2546
e25eec6