ToolPRMBench: Evaluating and Advancing Process Reward Models for Tool-using Agents
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Li, Dawei, Yao, Yuguang, Tan, Zhen, Liu, Huan, Guo, Ruocheng |
|---|---|
| Format: | Preprint |
| Publié: |
2026
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
ToolScan: A Benchmark for Characterizing Errors in Tool-Use LLMs
par: Kokane, Shirley, et autres
Publié: (2024)
par: Kokane, Shirley, et autres
Publié: (2024)
ToolFuzz -- Automated Agent Tool Testing
par: Milev, Ivan, et autres
Publié: (2025)
par: Milev, Ivan, et autres
Publié: (2025)
Automating Android Build Repair: Bridging the Reasoning-Execution Gap in LLM Agents with Domain-Specific Tools
par: Son, Ha Min, et autres
Publié: (2025)
par: Son, Ha Min, et autres
Publié: (2025)
ComplexMCP: Evaluation of LLM Agents in Dynamic, Interdependent, and Large-Scale Tool Sandbox
par: Li, Yuanyang, et autres
Publié: (2026)
par: Li, Yuanyang, et autres
Publié: (2026)
EvolveTool-Bench: Evaluating the Quality of LLM-Generated Tool Libraries as Software Artifacts
par: Kaliyev, Alibek T., et autres
Publié: (2026)
par: Kaliyev, Alibek T., et autres
Publié: (2026)
Rethinking the Role of Entropy in Optimizing Tool-Use Behaviors for Large Language Model Agents
par: Li, Zeping, et autres
Publié: (2026)
par: Li, Zeping, et autres
Publié: (2026)
Schema First Tool APIs for LLM Agents: A Controlled Study of Tool Misuse, Recovery, and Budgeted Performance
par: Sigdel, Akshey, et autres
Publié: (2026)
par: Sigdel, Akshey, et autres
Publié: (2026)
User Centric Evaluation of Code Generation Tools
par: Miah, Tanha, et autres
Publié: (2024)
par: Miah, Tanha, et autres
Publié: (2024)
ASA: Training-Free Representation Engineering for Tool-Calling Agents
par: Wang, Youjin, et autres
Publié: (2026)
par: Wang, Youjin, et autres
Publié: (2026)
Squeez: Task-Conditioned Tool-Output Pruning for Coding Agents
par: Kovács, Ádám
Publié: (2026)
par: Kovács, Ádám
Publié: (2026)
Investigating Tool-Memory Conflicts in Tool-Augmented LLMs
par: Cheng, Jiali, et autres
Publié: (2026)
par: Cheng, Jiali, et autres
Publié: (2026)
MCP-Zero: Active Tool Discovery for Autonomous LLM Agents
par: Fei, Xiang, et autres
Publié: (2025)
par: Fei, Xiang, et autres
Publié: (2025)
ParaTool: Shifting Tool Representations from Context to Parameters
par: Yu, Zekai, et autres
Publié: (2026)
par: Yu, Zekai, et autres
Publié: (2026)
SynthTools: A Framework for Scaling Synthetic Tools for Agent Development
par: Castellani, Tommaso, et autres
Publié: (2025)
par: Castellani, Tommaso, et autres
Publié: (2025)
A Tool for Generating Exceptional Behavior Tests With Large Language Models
par: Zhong, Linghan, et autres
Publié: (2025)
par: Zhong, Linghan, et autres
Publié: (2025)
The Tool-Overuse Illusion: Why Does LLM Prefer External Tools over Internal Knowledge?
par: Zeng, Yirong, et autres
Publié: (2026)
par: Zeng, Yirong, et autres
Publié: (2026)
Semantic Tool Discovery for Large Language Models: A Vector-Based Approach to MCP Tool Selection
par: Mudunuri, Sarat, et autres
Publié: (2026)
par: Mudunuri, Sarat, et autres
Publié: (2026)
Solver-Aided Verification of Policy Compliance in Tool-Augmented LLM Agents
par: Winston, Cailin, et autres
Publié: (2026)
par: Winston, Cailin, et autres
Publié: (2026)
Butterfly Effects in Toolchains: A Comprehensive Analysis of Failed Parameter Filling in LLM Tool-Agent Systems
par: Xiong, Qian, et autres
Publié: (2025)
par: Xiong, Qian, et autres
Publié: (2025)
JTPRO: A Joint Tool-Prompt Reflective Optimization Framework for Language Agents
par: Ghoshal, Sandip, et autres
Publié: (2026)
par: Ghoshal, Sandip, et autres
Publié: (2026)
Graph-Based Self-Healing Tool Routing for Cost-Efficient LLM Agents
par: Bholani, Neeraj
Publié: (2026)
par: Bholani, Neeraj
Publié: (2026)
Deploy-Master: Automating the Deployment of 50,000+ Agent-Ready Scientific Tools in One Day
par: Wang, Yi, et autres
Publié: (2026)
par: Wang, Yi, et autres
Publié: (2026)
The A-R Behavioral Space: Execution-Level Profiling of Tool-Using Language Model Agents in Organizational Deployment
par: Yu, Shasha, et autres
Publié: (2026)
par: Yu, Shasha, et autres
Publié: (2026)
ToolMisuseBench: An Offline Deterministic Benchmark for Tool Misuse and Recovery in Agentic Systems
par: Sigdel, Akshey, et autres
Publié: (2026)
par: Sigdel, Akshey, et autres
Publié: (2026)
CodeTool: Enhancing Programmatic Tool Invocation of LLMs via Process Supervision
par: Lu, Yifei, et autres
Publié: (2025)
par: Lu, Yifei, et autres
Publié: (2025)
Open, Reliable, and Collective: A Community-Driven Framework for Tool-Using AI Agents
par: Dang, Hy, et autres
Publié: (2026)
par: Dang, Hy, et autres
Publié: (2026)
MathViz-E: A Case-study in Domain-Specialized Tool-Using Agents
par: Bulusu, Arya, et autres
Publié: (2024)
par: Bulusu, Arya, et autres
Publié: (2024)
Automatic Red Teaming LLM-based Agents with Model Context Protocol Tools
par: He, Ping, et autres
Publié: (2025)
par: He, Ping, et autres
Publié: (2025)
AgentArcEval: An Architecture Evaluation Method for Foundation Model based Agents
par: Lu, Qinghua, et autres
Publié: (2025)
par: Lu, Qinghua, et autres
Publié: (2025)
Z-Space: A Multi-Agent Tool Orchestration Framework for Enterprise-Grade LLM Automation
par: He, Qingsong, et autres
Publié: (2025)
par: He, Qingsong, et autres
Publié: (2025)
An Executable Benchmarking Suite for Tool-Using Agents
par: Zhong, Zhiqing, et autres
Publié: (2026)
par: Zhong, Zhiqing, et autres
Publié: (2026)
Breaking the Illusion of Identity in LLM Tooling
par: Miller, Marek
Publié: (2026)
par: Miller, Marek
Publié: (2026)
Evaluating LLM-Based 0-to-1 Software Generation in End-to-End CLI Tool Scenarios
par: Hu, Ruida, et autres
Publié: (2026)
par: Hu, Ruida, et autres
Publié: (2026)
Open-Source AI-based SE Tools: Opportunities and Challenges of Collaborative Software Learning
par: Lin, Zhihao, et autres
Publié: (2024)
par: Lin, Zhihao, et autres
Publié: (2024)
DIVE: Scaling Diversity in Agentic Task Synthesis for Generalizable Tool Use
par: Chen, Aili, et autres
Publié: (2026)
par: Chen, Aili, et autres
Publié: (2026)
Unit Test Generation using Generative AI : A Comparative Performance Analysis of Autogeneration Tools
par: Bhatia, Shreya, et autres
Publié: (2023)
par: Bhatia, Shreya, et autres
Publié: (2023)
Evaluation-Driven Development and Operations of LLM Agents: A Process Model and Reference Architecture
par: Xia, Boming, et autres
Publié: (2024)
par: Xia, Boming, et autres
Publié: (2024)
Teaching LLMs to Learn Tool Trialing and Execution through Environment Interaction
par: Gao, Xingjie, et autres
Publié: (2026)
par: Gao, Xingjie, et autres
Publié: (2026)
The Causal Impact of Tool Affordance on Safety Alignment in LLM Agents
par: Yu, Shasha, et autres
Publié: (2026)
par: Yu, Shasha, et autres
Publié: (2026)
VQA support to Arabic Language Learning Educational Tool
par: Delassi, Khaled Bachir, et autres
Publié: (2025)
par: Delassi, Khaled Bachir, et autres
Publié: (2025)
Documents similaires
-
ToolScan: A Benchmark for Characterizing Errors in Tool-Use LLMs
par: Kokane, Shirley, et autres
Publié: (2024) -
ToolFuzz -- Automated Agent Tool Testing
par: Milev, Ivan, et autres
Publié: (2025) -
Automating Android Build Repair: Bridging the Reasoning-Execution Gap in LLM Agents with Domain-Specific Tools
par: Son, Ha Min, et autres
Publié: (2025) -
ComplexMCP: Evaluation of LLM Agents in Dynamic, Interdependent, and Large-Scale Tool Sandbox
par: Li, Yuanyang, et autres
Publié: (2026) -
EvolveTool-Bench: Evaluating the Quality of LLM-Generated Tool Libraries as Software Artifacts
par: Kaliyev, Alibek T., et autres
Publié: (2026)