Vending-Bench: A Benchmark for Long-Term Coherence of Autonomous Agents
Fuente:
arXiv
Salvato in:
| Autori principali: | Backlund, Axel, Petersson, Lukas |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Blueprint-Bench: Comparing spatial intelligence of LLMs, agents and image models
di: Petersson, Lukas, et al.
Pubblicazione: (2025)
di: Petersson, Lukas, et al.
Pubblicazione: (2025)
Butter-Bench: Evaluating LLM Controlled Robots for Practical Intelligence
di: Sharrock, Callum, et al.
Pubblicazione: (2025)
di: Sharrock, Callum, et al.
Pubblicazione: (2025)
Mem2ActBench: A Benchmark for Evaluating Long-Term Memory Utilization in Task-Oriented Autonomous Agents
di: Shen, Yiting, et al.
Pubblicazione: (2026)
di: Shen, Yiting, et al.
Pubblicazione: (2026)
$\texttt{YC-Bench}$: Benchmarking AI Agents for Long-Term Planning and Consistent Execution
di: He, Muyu, et al.
Pubblicazione: (2026)
di: He, Muyu, et al.
Pubblicazione: (2026)
VehicleMemBench: An Executable Benchmark for Multi-User Long-Term Memory in In-Vehicle Agents
di: Chen, Yuhao, et al.
Pubblicazione: (2026)
di: Chen, Yuhao, et al.
Pubblicazione: (2026)
StoryBench: A Dynamic Benchmark for Evaluating Long-Term Memory with Multi Turns
di: Wan, Luanbo, et al.
Pubblicazione: (2025)
di: Wan, Luanbo, et al.
Pubblicazione: (2025)
AgencyBench: Benchmarking the Frontiers of Autonomous Agents in 1M-Token Real-World Contexts
di: Li, Keyu, et al.
Pubblicazione: (2026)
di: Li, Keyu, et al.
Pubblicazione: (2026)
TRIP-Bench: A Benchmark for Long-Horizon Interactive Agents in Real-World Scenarios
di: Shen, Yuanzhe, et al.
Pubblicazione: (2026)
di: Shen, Yuanzhe, et al.
Pubblicazione: (2026)
LoCoBench-Agent: An Interactive Benchmark for LLM Agents in Long-Context Software Engineering
di: Qiu, Jielin, et al.
Pubblicazione: (2025)
di: Qiu, Jielin, et al.
Pubblicazione: (2025)
DCA-Bench: A Benchmark for Dataset Curation Agents
di: Huang, Benhao, et al.
Pubblicazione: (2024)
di: Huang, Benhao, et al.
Pubblicazione: (2024)
Agent-ValueBench: A Comprehensive Benchmark for Evaluating Agent Values
di: Dong, Haonan, et al.
Pubblicazione: (2026)
di: Dong, Haonan, et al.
Pubblicazione: (2026)
VitalBench: A Rigorous Multi-Center Benchmark for Long-Term Vital Sign Prediction in Intraoperative Care
di: Cai, Xiuding, et al.
Pubblicazione: (2025)
di: Cai, Xiuding, et al.
Pubblicazione: (2025)
MemoryRewardBench: Benchmarking Reward Models for Long-Term Memory Management in Large Language Models
di: Tang, Zecheng, et al.
Pubblicazione: (2026)
di: Tang, Zecheng, et al.
Pubblicazione: (2026)
LongGenBench: Long-context Generation Benchmark
di: Liu, Xiang, et al.
Pubblicazione: (2024)
di: Liu, Xiang, et al.
Pubblicazione: (2024)
PSPA-Bench: A Personalized Benchmark for Smartphone GUI Agent
di: Nie, Hongyi, et al.
Pubblicazione: (2026)
di: Nie, Hongyi, et al.
Pubblicazione: (2026)
RetailBench: Evaluating Long-Horizon Autonomous Decision-Making and Strategy Stability of LLM Agents in Realistic Retail Environments
di: Zhang, Linghua, et al.
Pubblicazione: (2026)
di: Zhang, Linghua, et al.
Pubblicazione: (2026)
Mem-Gallery: Benchmarking Multimodal Long-Term Conversational Memory for MLLM Agents
di: Bei, Yuanchen, et al.
Pubblicazione: (2026)
di: Bei, Yuanchen, et al.
Pubblicazione: (2026)
LifeBench: A Benchmark for Long-Horizon Multi-Source Memory
di: Cheng, Zihao, et al.
Pubblicazione: (2026)
di: Cheng, Zihao, et al.
Pubblicazione: (2026)
KellyBench: A Benchmark for Long-Horizon Sequential Decision Making
di: Grady, Thomas, et al.
Pubblicazione: (2026)
di: Grady, Thomas, et al.
Pubblicazione: (2026)
ST-WebAgentBench: A Benchmark for Evaluating Safety and Trustworthiness in Web Agents
di: Levy, Ido, et al.
Pubblicazione: (2024)
di: Levy, Ido, et al.
Pubblicazione: (2024)
ColorBench: Benchmarking Mobile Agents with Graph-Structured Framework for Complex Long-Horizon Tasks
di: Song, Yuanyi, et al.
Pubblicazione: (2025)
di: Song, Yuanyi, et al.
Pubblicazione: (2025)
SPA-Bench: A Comprehensive Benchmark for SmartPhone Agent Evaluation
di: Chen, Jingxuan, et al.
Pubblicazione: (2024)
di: Chen, Jingxuan, et al.
Pubblicazione: (2024)
ALE-Bench: A Benchmark for Long-Horizon Objective-Driven Algorithm Engineering
di: Imajuku, Yuki, et al.
Pubblicazione: (2025)
di: Imajuku, Yuki, et al.
Pubblicazione: (2025)
ES-MemEval: Benchmarking Conversational Agents on Personalized Long-Term Emotional Support
di: Chen, Tiantian, et al.
Pubblicazione: (2026)
di: Chen, Tiantian, et al.
Pubblicazione: (2026)
LPS-Bench: Benchmarking Safety Awareness of Computer-Use Agents in Long-Horizon Planning under Benign and Adversarial Scenarios
di: Chen, Tianyu, et al.
Pubblicazione: (2026)
di: Chen, Tianyu, et al.
Pubblicazione: (2026)
ProBench: Benchmarking GUI Agents with Accurate Process Information
di: Yang, Leyang, et al.
Pubblicazione: (2025)
di: Yang, Leyang, et al.
Pubblicazione: (2025)
SGR-Bench: Benchmarking Search Agents on State-Gated Retrieval
di: Li, Ningyuan, et al.
Pubblicazione: (2026)
di: Li, Ningyuan, et al.
Pubblicazione: (2026)
GeoAgentBench: A Dynamic Execution Benchmark for Tool-Augmented Agents in Spatial Analysis
di: Yu, Bo, et al.
Pubblicazione: (2026)
di: Yu, Bo, et al.
Pubblicazione: (2026)
CloneMem: Benchmarking Long-Term Memory for AI Clones
di: Hu, Sen, et al.
Pubblicazione: (2026)
di: Hu, Sen, et al.
Pubblicazione: (2026)
HeroBench: A Benchmark for Long-Horizon Planning and Structured Reasoning in Virtual Worlds
di: Anokhin, Petr, et al.
Pubblicazione: (2025)
di: Anokhin, Petr, et al.
Pubblicazione: (2025)
LifeAgentBench: A Multi-dimensional Benchmark and Agent for Personal Health Assistants in Digital Health
di: Tian, Ye, et al.
Pubblicazione: (2026)
di: Tian, Ye, et al.
Pubblicazione: (2026)
NewtonBench: Benchmarking Generalizable Scientific Law Discovery in LLM Agents
di: Zheng, Tianshi, et al.
Pubblicazione: (2025)
di: Zheng, Tianshi, et al.
Pubblicazione: (2025)
MobiBench: Multi-Branch, Modular Benchmark for Mobile GUI Agents
di: Im, Youngmin, et al.
Pubblicazione: (2025)
di: Im, Youngmin, et al.
Pubblicazione: (2025)
ESL-Bench: An Event-Driven Synthetic Longitudinal Benchmark for Health Agents
di: Li, Chao, et al.
Pubblicazione: (2026)
di: Li, Chao, et al.
Pubblicazione: (2026)
SkillGenBench: Benchmarking Skill Generation Pipelines for LLM Agents
di: Zhou, Yifan, et al.
Pubblicazione: (2026)
di: Zhou, Yifan, et al.
Pubblicazione: (2026)
AJ-Bench: Benchmarking Agent-as-a-Judge for Environment-Aware Evaluation
di: Shi, Wentao, et al.
Pubblicazione: (2026)
di: Shi, Wentao, et al.
Pubblicazione: (2026)
EgoBench: An Interactive Egocentric Multimodal Benchmark for Tool-Using Agents
di: Liu, Yunqi, et al.
Pubblicazione: (2026)
di: Liu, Yunqi, et al.
Pubblicazione: (2026)
HiMem: Hierarchical Long-Term Memory for LLM Long-Horizon Agents
di: Zhang, Ningning, et al.
Pubblicazione: (2026)
di: Zhang, Ningning, et al.
Pubblicazione: (2026)
AgentNoiseBench: Benchmarking Robustness of Tool-Using LLM Agents Under Noisy Condition
di: Wang, Ruipeng, et al.
Pubblicazione: (2026)
di: Wang, Ruipeng, et al.
Pubblicazione: (2026)
PersistBench: When Should Long-Term Memories Be Forgotten by LLMs?
di: Pulipaka, Sidharth, et al.
Pubblicazione: (2026)
di: Pulipaka, Sidharth, et al.
Pubblicazione: (2026)
Documenti analoghi
-
Blueprint-Bench: Comparing spatial intelligence of LLMs, agents and image models
di: Petersson, Lukas, et al.
Pubblicazione: (2025) -
Butter-Bench: Evaluating LLM Controlled Robots for Practical Intelligence
di: Sharrock, Callum, et al.
Pubblicazione: (2025) -
Mem2ActBench: A Benchmark for Evaluating Long-Term Memory Utilization in Task-Oriented Autonomous Agents
di: Shen, Yiting, et al.
Pubblicazione: (2026) -
$\texttt{YC-Bench}$: Benchmarking AI Agents for Long-Term Planning and Consistent Execution
di: He, Muyu, et al.
Pubblicazione: (2026) -
VehicleMemBench: An Executable Benchmark for Multi-User Long-Term Memory in In-Vehicle Agents
di: Chen, Yuhao, et al.
Pubblicazione: (2026)