dabstep
v1.0DABstep: Data Agent Benchmark for Multi-step Reasoning. 450 tasks where agents analyze payment transaction data with Python/pandas to answer business questions.
uvx harbor run -d dabstep@1.0Tasks (450)
dabstep-40
uvx harbor run -d dabstep@1.0 -t dabstep-40e25eec6
dabstep-402
uvx harbor run -d dabstep@1.0 -t dabstep-402e25eec6
dabstep-41
uvx harbor run -d dabstep@1.0 -t dabstep-41e25eec6
dabstep-42
uvx harbor run -d dabstep@1.0 -t dabstep-42e25eec6
dabstep-43
uvx harbor run -d dabstep@1.0 -t dabstep-43e25eec6
dabstep-44
uvx harbor run -d dabstep@1.0 -t dabstep-44e25eec6
dabstep-45
uvx harbor run -d dabstep@1.0 -t dabstep-45e25eec6
dabstep-46
uvx harbor run -d dabstep@1.0 -t dabstep-46e25eec6
dabstep-47
uvx harbor run -d dabstep@1.0 -t dabstep-47e25eec6
dabstep-471
uvx harbor run -d dabstep@1.0 -t dabstep-471e25eec6
dabstep-48
uvx harbor run -d dabstep@1.0 -t dabstep-48e25eec6
dabstep-49
uvx harbor run -d dabstep@1.0 -t dabstep-49e25eec6
dabstep-5
uvx harbor run -d dabstep@1.0 -t dabstep-5e25eec6
dabstep-50
uvx harbor run -d dabstep@1.0 -t dabstep-50e25eec6
dabstep-51
uvx harbor run -d dabstep@1.0 -t dabstep-51e25eec6
dabstep-52
uvx harbor run -d dabstep@1.0 -t dabstep-52e25eec6
dabstep-53
uvx harbor run -d dabstep@1.0 -t dabstep-53e25eec6
dabstep-54
uvx harbor run -d dabstep@1.0 -t dabstep-54e25eec6
dabstep-55
uvx harbor run -d dabstep@1.0 -t dabstep-55e25eec6
dabstep-56
uvx harbor run -d dabstep@1.0 -t dabstep-56e25eec6
dabstep-57
uvx harbor run -d dabstep@1.0 -t dabstep-57e25eec6
dabstep-58
uvx harbor run -d dabstep@1.0 -t dabstep-58e25eec6
dabstep-59
uvx harbor run -d dabstep@1.0 -t dabstep-59e25eec6
dabstep-6
uvx harbor run -d dabstep@1.0 -t dabstep-6e25eec6
dabstep-60
uvx harbor run -d dabstep@1.0 -t dabstep-60e25eec6
dabstep-61
uvx harbor run -d dabstep@1.0 -t dabstep-61e25eec6
dabstep-617
uvx harbor run -d dabstep@1.0 -t dabstep-617e25eec6
dabstep-62
uvx harbor run -d dabstep@1.0 -t dabstep-62e25eec6
dabstep-623
uvx harbor run -d dabstep@1.0 -t dabstep-623e25eec6
dabstep-625
uvx harbor run -d dabstep@1.0 -t dabstep-625e25eec6
dabstep-63
uvx harbor run -d dabstep@1.0 -t dabstep-63e25eec6
dabstep-64
uvx harbor run -d dabstep@1.0 -t dabstep-64e25eec6
dabstep-65
uvx harbor run -d dabstep@1.0 -t dabstep-65e25eec6
dabstep-66
uvx harbor run -d dabstep@1.0 -t dabstep-66e25eec6
dabstep-67
uvx harbor run -d dabstep@1.0 -t dabstep-67e25eec6
dabstep-68
uvx harbor run -d dabstep@1.0 -t dabstep-68e25eec6
dabstep-682
uvx harbor run -d dabstep@1.0 -t dabstep-682e25eec6
dabstep-69
uvx harbor run -d dabstep@1.0 -t dabstep-69e25eec6
dabstep-7
uvx harbor run -d dabstep@1.0 -t dabstep-7e25eec6
dabstep-70
uvx harbor run -d dabstep@1.0 -t dabstep-70e25eec6
dabstep-71
uvx harbor run -d dabstep@1.0 -t dabstep-71e25eec6
dabstep-72
uvx harbor run -d dabstep@1.0 -t dabstep-72e25eec6
dabstep-793
uvx harbor run -d dabstep@1.0 -t dabstep-793e25eec6
dabstep-8
uvx harbor run -d dabstep@1.0 -t dabstep-8e25eec6
dabstep-842
uvx harbor run -d dabstep@1.0 -t dabstep-842e25eec6
dabstep-883
uvx harbor run -d dabstep@1.0 -t dabstep-883e25eec6
dabstep-889
uvx harbor run -d dabstep@1.0 -t dabstep-889e25eec6
dabstep-9
uvx harbor run -d dabstep@1.0 -t dabstep-9e25eec6
dabstep-916
uvx harbor run -d dabstep@1.0 -t dabstep-916e25eec6
dabstep-973
uvx harbor run -d dabstep@1.0 -t dabstep-973e25eec6