dabstep
v1.0DABstep: Data Agent Benchmark for Multi-step Reasoning. 450 tasks where agents analyze payment transaction data with Python/pandas to answer business questions.
uvx harbor run -d dabstep@1.0Tasks (450)
dabstep-1505
uvx harbor run -d dabstep@1.0 -t dabstep-1505e25eec6
dabstep-1506
uvx harbor run -d dabstep@1.0 -t dabstep-1506e25eec6
dabstep-1507
uvx harbor run -d dabstep@1.0 -t dabstep-1507e25eec6
dabstep-1508
uvx harbor run -d dabstep@1.0 -t dabstep-1508e25eec6
dabstep-1509
uvx harbor run -d dabstep@1.0 -t dabstep-1509e25eec6
dabstep-1510
uvx harbor run -d dabstep@1.0 -t dabstep-1510e25eec6
dabstep-1511
uvx harbor run -d dabstep@1.0 -t dabstep-1511e25eec6
dabstep-1512
uvx harbor run -d dabstep@1.0 -t dabstep-1512e25eec6
dabstep-1513
uvx harbor run -d dabstep@1.0 -t dabstep-1513e25eec6
dabstep-1514
uvx harbor run -d dabstep@1.0 -t dabstep-1514e25eec6
dabstep-1515
uvx harbor run -d dabstep@1.0 -t dabstep-1515e25eec6
dabstep-1516
uvx harbor run -d dabstep@1.0 -t dabstep-1516e25eec6
dabstep-1517
uvx harbor run -d dabstep@1.0 -t dabstep-1517e25eec6
dabstep-1518
uvx harbor run -d dabstep@1.0 -t dabstep-1518e25eec6
dabstep-1519
uvx harbor run -d dabstep@1.0 -t dabstep-1519e25eec6
dabstep-1520
uvx harbor run -d dabstep@1.0 -t dabstep-1520e25eec6
dabstep-1531
uvx harbor run -d dabstep@1.0 -t dabstep-1531e25eec6
dabstep-1538
uvx harbor run -d dabstep@1.0 -t dabstep-1538e25eec6
dabstep-1570
uvx harbor run -d dabstep@1.0 -t dabstep-1570e25eec6
dabstep-1574
uvx harbor run -d dabstep@1.0 -t dabstep-1574e25eec6
dabstep-1577
uvx harbor run -d dabstep@1.0 -t dabstep-1577e25eec6
dabstep-1584
uvx harbor run -d dabstep@1.0 -t dabstep-1584e25eec6
dabstep-1593
uvx harbor run -d dabstep@1.0 -t dabstep-1593e25eec6
dabstep-1594
uvx harbor run -d dabstep@1.0 -t dabstep-1594e25eec6
dabstep-16
uvx harbor run -d dabstep@1.0 -t dabstep-16e25eec6
dabstep-1604
uvx harbor run -d dabstep@1.0 -t dabstep-1604e25eec6
dabstep-1615
uvx harbor run -d dabstep@1.0 -t dabstep-1615e25eec6
dabstep-1631
uvx harbor run -d dabstep@1.0 -t dabstep-1631e25eec6
dabstep-1636
uvx harbor run -d dabstep@1.0 -t dabstep-1636e25eec6
dabstep-1641
uvx harbor run -d dabstep@1.0 -t dabstep-1641e25eec6
dabstep-1643
uvx harbor run -d dabstep@1.0 -t dabstep-1643e25eec6
dabstep-1645
uvx harbor run -d dabstep@1.0 -t dabstep-1645e25eec6
dabstep-1646
uvx harbor run -d dabstep@1.0 -t dabstep-1646e25eec6
dabstep-1674
uvx harbor run -d dabstep@1.0 -t dabstep-1674e25eec6
dabstep-1675
uvx harbor run -d dabstep@1.0 -t dabstep-1675e25eec6
dabstep-1676
uvx harbor run -d dabstep@1.0 -t dabstep-1676e25eec6
dabstep-1679
uvx harbor run -d dabstep@1.0 -t dabstep-1679e25eec6
dabstep-1681
uvx harbor run -d dabstep@1.0 -t dabstep-1681e25eec6
dabstep-1682
uvx harbor run -d dabstep@1.0 -t dabstep-1682e25eec6
dabstep-1683
uvx harbor run -d dabstep@1.0 -t dabstep-1683e25eec6
dabstep-1684
uvx harbor run -d dabstep@1.0 -t dabstep-1684e25eec6
dabstep-1685
uvx harbor run -d dabstep@1.0 -t dabstep-1685e25eec6
dabstep-1686
uvx harbor run -d dabstep@1.0 -t dabstep-1686e25eec6
dabstep-1687
uvx harbor run -d dabstep@1.0 -t dabstep-1687e25eec6
dabstep-1688
uvx harbor run -d dabstep@1.0 -t dabstep-1688e25eec6
dabstep-1689
uvx harbor run -d dabstep@1.0 -t dabstep-1689e25eec6
dabstep-1694
uvx harbor run -d dabstep@1.0 -t dabstep-1694e25eec6
dabstep-1696
uvx harbor run -d dabstep@1.0 -t dabstep-1696e25eec6
dabstep-1698
uvx harbor run -d dabstep@1.0 -t dabstep-1698e25eec6
dabstep-1699
uvx harbor run -d dabstep@1.0 -t dabstep-1699e25eec6
dabstep-17
uvx harbor run -d dabstep@1.0 -t dabstep-17e25eec6
dabstep-1700
uvx harbor run -d dabstep@1.0 -t dabstep-1700e25eec6
dabstep-1701
uvx harbor run -d dabstep@1.0 -t dabstep-1701e25eec6
dabstep-1702
uvx harbor run -d dabstep@1.0 -t dabstep-1702e25eec6
dabstep-1704
uvx harbor run -d dabstep@1.0 -t dabstep-1704e25eec6
dabstep-1705
uvx harbor run -d dabstep@1.0 -t dabstep-1705e25eec6
dabstep-1706
uvx harbor run -d dabstep@1.0 -t dabstep-1706e25eec6
dabstep-1709
uvx harbor run -d dabstep@1.0 -t dabstep-1709e25eec6
dabstep-1711
uvx harbor run -d dabstep@1.0 -t dabstep-1711e25eec6
dabstep-1712
uvx harbor run -d dabstep@1.0 -t dabstep-1712e25eec6
dabstep-1713
uvx harbor run -d dabstep@1.0 -t dabstep-1713e25eec6
dabstep-1715
uvx harbor run -d dabstep@1.0 -t dabstep-1715e25eec6
dabstep-1716
uvx harbor run -d dabstep@1.0 -t dabstep-1716e25eec6
dabstep-1717
uvx harbor run -d dabstep@1.0 -t dabstep-1717e25eec6
dabstep-1720
uvx harbor run -d dabstep@1.0 -t dabstep-1720e25eec6
dabstep-1721
uvx harbor run -d dabstep@1.0 -t dabstep-1721e25eec6
dabstep-1722
uvx harbor run -d dabstep@1.0 -t dabstep-1722e25eec6
dabstep-1723
uvx harbor run -d dabstep@1.0 -t dabstep-1723e25eec6
dabstep-1724
uvx harbor run -d dabstep@1.0 -t dabstep-1724e25eec6
dabstep-1728
uvx harbor run -d dabstep@1.0 -t dabstep-1728e25eec6
dabstep-1729
uvx harbor run -d dabstep@1.0 -t dabstep-1729e25eec6
dabstep-1730
uvx harbor run -d dabstep@1.0 -t dabstep-1730e25eec6
dabstep-1731
uvx harbor run -d dabstep@1.0 -t dabstep-1731e25eec6
dabstep-1732
uvx harbor run -d dabstep@1.0 -t dabstep-1732e25eec6
dabstep-1734
uvx harbor run -d dabstep@1.0 -t dabstep-1734e25eec6
dabstep-1738
uvx harbor run -d dabstep@1.0 -t dabstep-1738e25eec6
dabstep-1739
uvx harbor run -d dabstep@1.0 -t dabstep-1739e25eec6
dabstep-1740
uvx harbor run -d dabstep@1.0 -t dabstep-1740e25eec6
dabstep-1741
uvx harbor run -d dabstep@1.0 -t dabstep-1741e25eec6
dabstep-1742
uvx harbor run -d dabstep@1.0 -t dabstep-1742e25eec6
dabstep-1743
uvx harbor run -d dabstep@1.0 -t dabstep-1743e25eec6
dabstep-1744
uvx harbor run -d dabstep@1.0 -t dabstep-1744e25eec6
dabstep-1745
uvx harbor run -d dabstep@1.0 -t dabstep-1745e25eec6
dabstep-1746
uvx harbor run -d dabstep@1.0 -t dabstep-1746e25eec6
dabstep-1747
uvx harbor run -d dabstep@1.0 -t dabstep-1747e25eec6
dabstep-1748
uvx harbor run -d dabstep@1.0 -t dabstep-1748e25eec6
dabstep-1749
uvx harbor run -d dabstep@1.0 -t dabstep-1749e25eec6
dabstep-1750
uvx harbor run -d dabstep@1.0 -t dabstep-1750e25eec6
dabstep-1752
uvx harbor run -d dabstep@1.0 -t dabstep-1752e25eec6
dabstep-1753
uvx harbor run -d dabstep@1.0 -t dabstep-1753e25eec6
dabstep-1756
uvx harbor run -d dabstep@1.0 -t dabstep-1756e25eec6
dabstep-1757
uvx harbor run -d dabstep@1.0 -t dabstep-1757e25eec6
dabstep-1760
uvx harbor run -d dabstep@1.0 -t dabstep-1760e25eec6
dabstep-1763
uvx harbor run -d dabstep@1.0 -t dabstep-1763e25eec6
dabstep-1765
uvx harbor run -d dabstep@1.0 -t dabstep-1765e25eec6
dabstep-1769
uvx harbor run -d dabstep@1.0 -t dabstep-1769e25eec6
dabstep-1771
uvx harbor run -d dabstep@1.0 -t dabstep-1771e25eec6
dabstep-1773
uvx harbor run -d dabstep@1.0 -t dabstep-1773e25eec6
dabstep-1775
uvx harbor run -d dabstep@1.0 -t dabstep-1775e25eec6
dabstep-178
uvx harbor run -d dabstep@1.0 -t dabstep-178e25eec6