MCP-Atlas: A Large-Scale Benchmark for Tool-Use Competency with Real MCP Servers
Fuente:
arXiv
Gespeichert in:
| Hauptverfasser: | Bandi, Chaithanya, Dumitru, Razvan-Gabriel, Hertzberg, Ben, Agarwal, Divyansh, Boo, Geobio, Polakam, Tejas, Hassaan, Sami, Da, Jeff, Kim, HiJae, Gupta, Vipul, Sharma, Manasi, Park, Andrew, Dimakis, Martin, Montoya, Ernesto Gabriel Hernandez, Rambado, Dan, Salazar, Ivan, Cruz, Rafael, Rezaei, MohammadHossein, Rane, Chetan, Levin, Ben, Zhang, Daniel Yue, Kenstler, Brad, Liu, Bing |
|---|---|
| Format: | Preprint |
| Veröffentlicht: |
2026
|
| Schlagworte: | |
| Online-Zugang: | |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
Ähnliche Einträge
Evaluation Report on MCP Servers
von: Luo, Zhiling, et al.
Veröffentlicht: (2025)
von: Luo, Zhiling, et al.
Veröffentlicht: (2025)
MCP Guardian: A Security-First Layer for Safeguarding MCP-Based AI System
von: Kumar, Sonu, et al.
Veröffentlicht: (2025)
von: Kumar, Sonu, et al.
Veröffentlicht: (2025)
Scripts for measurement of MCP Server Marketplaces
von: Anonymous, Anonymous
Veröffentlicht: (2026)
von: Anonymous, Anonymous
Veröffentlicht: (2026)
TrialMCP Pack: MCP Servers for Physical AI Oncology Clinical Trial Systems
von: Kevin Kawchak, et al.
Veröffentlicht: (2026)
von: Kevin Kawchak, et al.
Veröffentlicht: (2026)
Model Context Protocol (MCP) at First Glance: Studying the Security and Maintainability of MCP Servers
von: Hasan, Mohammed Mehedi, et al.
Veröffentlicht: (2025)
von: Hasan, Mohammed Mehedi, et al.
Veröffentlicht: (2025)
MCPGuard : Automatically Detecting Vulnerabilities in MCP Servers
von: Wang, Bin, et al.
Veröffentlicht: (2025)
von: Wang, Bin, et al.
Veröffentlicht: (2025)
Auditing MCP Servers for Over-Privileged Tool Capabilities
von: Huang, Charoes, et al.
Veröffentlicht: (2026)
von: Huang, Charoes, et al.
Veröffentlicht: (2026)
When MCP Servers Attack: Taxonomy, Feasibility, and Mitigation
von: Zhao, Weibo, et al.
Veröffentlicht: (2025)
von: Zhao, Weibo, et al.
Veröffentlicht: (2025)
MCP-Bench: Benchmarking Tool-Using LLM Agents with Complex Real-World Tasks via MCP Servers
von: Wang, Zhenting, et al.
Veröffentlicht: (2025)
von: Wang, Zhenting, et al.
Veröffentlicht: (2025)
MCP-SafetyBench: A Benchmark for Safety Evaluation of Large Language Models with Real-World MCP Servers
von: Zong, Xuanjun, et al.
Veröffentlicht: (2025)
von: Zong, Xuanjun, et al.
Veröffentlicht: (2025)
MCP Pitfall Lab: Exposing Developer Pitfalls in MCP Tool Server Security under Multi-Vector Attacks
von: Hao, Run, et al.
Veröffentlicht: (2026)
von: Hao, Run, et al.
Veröffentlicht: (2026)
Debate, Deliberate, Decide (D3): A Cost-Aware Adversarial Framework for Reliable and Interpretable LLM Evaluation
von: Harrasse, Abir, et al.
Veröffentlicht: (2024)
von: Harrasse, Abir, et al.
Veröffentlicht: (2024)
Enhancing Model Context Protocol (MCP) with Context-Aware Server Collaboration
von: Jayanti, Meenakshi Amulya, et al.
Veröffentlicht: (2026)
von: Jayanti, Meenakshi Amulya, et al.
Veröffentlicht: (2026)
From Docs to Descriptions: Smell-Aware Evaluation of MCP Server Descriptions
von: Wang, Peiran, et al.
Veröffentlicht: (2026)
von: Wang, Peiran, et al.
Veröffentlicht: (2026)
LiteCUA: Computer as MCP Server for Computer-Use Agent on AIOS
von: Mei, Kai, et al.
Veröffentlicht: (2025)
von: Mei, Kai, et al.
Veröffentlicht: (2025)
citecheck: An MCP Server for Automated Bibliographic Verification and Repair in Scholarly Manuscripts
von: Lee, Junhyeok
Veröffentlicht: (2026)
von: Lee, Junhyeok
Veröffentlicht: (2026)
A Modular Reference Architecture for MCP-Servers Enabling Agentic BIM Interaction
von: Heimig-Elschner, Tobias, et al.
Veröffentlicht: (2025)
von: Heimig-Elschner, Tobias, et al.
Veröffentlicht: (2025)
MCPTox: A Benchmark for Tool Poisoning Attack on Real-World MCP Servers
von: Wang, Zhiqiang, et al.
Veröffentlicht: (2025)
von: Wang, Zhiqiang, et al.
Veröffentlicht: (2025)
Can LLM Infer Risk Information From MCP Server System Logs?
von: Fu, Jiayi, et al.
Veröffentlicht: (2025)
von: Fu, Jiayi, et al.
Veröffentlicht: (2025)
From Component Manipulation to System Compromise: Understanding and Detecting Malicious MCP Servers
von: Huang, Yiheng, et al.
Veröffentlicht: (2026)
von: Huang, Yiheng, et al.
Veröffentlicht: (2026)
CodeMem: Architecting Reproducible Agents via Dynamic MCP and Procedural Memory
von: Gaurav, Nishant, et al.
Veröffentlicht: (2025)
von: Gaurav, Nishant, et al.
Veröffentlicht: (2025)
Busemann and MCP
von: Fujioka, Tadashi, et al.
Veröffentlicht: (2026)
von: Fujioka, Tadashi, et al.
Veröffentlicht: (2026)
MCP-ITP: An Automated Framework for Implicit Tool Poisoning in MCP
von: Li, Ruiqi, et al.
Veröffentlicht: (2026)
von: Li, Ruiqi, et al.
Veröffentlicht: (2026)
Code2MCP: Transforming Code Repositories into MCP Services
von: Ouyang, Chaoqian, et al.
Veröffentlicht: (2025)
von: Ouyang, Chaoqian, et al.
Veröffentlicht: (2025)
ROSBag MCP Server: Analyzing Robot Data with LLMs for Agentic Embodied AI Applications
von: Fu, Lei, et al.
Veröffentlicht: (2025)
von: Fu, Lei, et al.
Veröffentlicht: (2025)
VIPER-MCP: Detecting and Exploiting Taint-Style Vulnerabilities in Model Context Protocol Servers
von: Sun, Pengyu, et al.
Veröffentlicht: (2026)
von: Sun, Pengyu, et al.
Veröffentlicht: (2026)
A First Measurement Study on Authentication Security in Real-World Remote MCP Servers
von: Zhou, Huijun, et al.
Veröffentlicht: (2026)
von: Zhou, Huijun, et al.
Veröffentlicht: (2026)
Towards a Declarative Agentic Layer for Intelligent Agents in MCP-Based Server Ecosystems
von: Rodriguez-Sanchez, Maria Jesus, et al.
Veröffentlicht: (2026)
von: Rodriguez-Sanchez, Maria Jesus, et al.
Veröffentlicht: (2026)
MCPHunt: An Evaluation Framework for Cross-Boundary Data Propagation in Multi-Server MCP Agents
von: Li, Haonan, et al.
Veröffentlicht: (2026)
von: Li, Haonan, et al.
Veröffentlicht: (2026)
MCP-in-SoS: Risk assessment framework for open-source MCP servers
von: Kumar, Pratyay, et al.
Veröffentlicht: (2026)
von: Kumar, Pratyay, et al.
Veröffentlicht: (2026)
OSWorld-MCP: Benchmarking MCP Tool Invocation In Computer-Use Agents
von: Jia, Hongrui, et al.
Veröffentlicht: (2025)
von: Jia, Hongrui, et al.
Veröffentlicht: (2025)
From REST to MCP: An Empirical Study of API Wrapping and Automated Server Generation for LLM Agents
von: Mastouri, Meriem, et al.
Veröffentlicht: (2025)
von: Mastouri, Meriem, et al.
Veröffentlicht: (2025)
Trivial Trojans: How Minimal MCP Servers Enable Cross-Tool Exfiltration of Sensitive Data
von: Croce, Nicola, et al.
Veröffentlicht: (2025)
von: Croce, Nicola, et al.
Veröffentlicht: (2025)
MCP Bridge: A Lightweight, LLM-Agnostic RESTful Proxy for Model Context Protocol Servers
von: Ahmadi, Arash, et al.
Veröffentlicht: (2025)
von: Ahmadi, Arash, et al.
Veröffentlicht: (2025)
MCP-Universe: Benchmarking Large Language Models with Real-World Model Context Protocol Servers
von: Luo, Ziyang, et al.
Veröffentlicht: (2025)
von: Luo, Ziyang, et al.
Veröffentlicht: (2025)
From Language to Action: Enhancing LLM Task Efficiency with Task-Aware MCP Server Recommendation
von: He, Shiyu, et al.
Veröffentlicht: (2026)
von: He, Shiyu, et al.
Veröffentlicht: (2026)
DeltaMCP: Incremental Regeneration via Spec-Aware Transformation for MCP servers
von: Pujara, Aditya, et al.
Veröffentlicht: (2026)
von: Pujara, Aditya, et al.
Veröffentlicht: (2026)
BioinfoMCP: A Unified Platform Enabling MCP Interfaces in Agentic Bioinformatics
von: Widjaja, Florensia, et al.
Veröffentlicht: (2025)
von: Widjaja, Florensia, et al.
Veröffentlicht: (2025)
ELLEN: Extremely Lightly Supervised Learning For Efficient Named Entity Recognition
von: Riaz, Haris, et al.
Veröffentlicht: (2024)
von: Riaz, Haris, et al.
Veröffentlicht: (2024)
Enhancing Transformer RNNs with Multiple Temporal Perspectives
von: Dumitru, Razvan-Gabriel, et al.
Veröffentlicht: (2024)
von: Dumitru, Razvan-Gabriel, et al.
Veröffentlicht: (2024)
Ähnliche Einträge
-
Evaluation Report on MCP Servers
von: Luo, Zhiling, et al.
Veröffentlicht: (2025) -
MCP Guardian: A Security-First Layer for Safeguarding MCP-Based AI System
von: Kumar, Sonu, et al.
Veröffentlicht: (2025) -
Scripts for measurement of MCP Server Marketplaces
von: Anonymous, Anonymous
Veröffentlicht: (2026) -
TrialMCP Pack: MCP Servers for Physical AI Oncology Clinical Trial Systems
von: Kevin Kawchak, et al.
Veröffentlicht: (2026) -
Model Context Protocol (MCP) at First Glance: Studying the Security and Maintainability of MCP Servers
von: Hasan, Mohammed Mehedi, et al.
Veröffentlicht: (2025)