Testing and Understanding Erroneous Planning in LLM Agents through Synthesized User Inputs
Fuente:
arXiv
Salvato in:
| Autori principali: | Ji, Zhenlan, Wu, Daoyuan, Ma, Pingchuan, Li, Zongjie, Wang, Shuai |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
STShield: Single-Token Sentinel for Real-Time Jailbreak Detection in Large Language Models
di: Wang, Xunguang, et al.
Pubblicazione: (2025)
di: Wang, Xunguang, et al.
Pubblicazione: (2025)
IP Leakage Attacks Targeting LLM-Based Multi-Agent Systems
di: Wang, Liwen, et al.
Pubblicazione: (2025)
di: Wang, Liwen, et al.
Pubblicazione: (2025)
Split and Merge: Aligning Position Biases in LLM-based Evaluators
di: Li, Zongjie, et al.
Pubblicazione: (2023)
di: Li, Zongjie, et al.
Pubblicazione: (2023)
Digging Into the Internal: Causality-Based Analysis of LLM Function Calling
di: Ji, Zhenlan, et al.
Pubblicazione: (2025)
di: Ji, Zhenlan, et al.
Pubblicazione: (2025)
Measuring and Augmenting Large Language Models for Solving Capture-the-Flag Challenges
di: Ji, Zimo, et al.
Pubblicazione: (2025)
di: Ji, Zimo, et al.
Pubblicazione: (2025)
SoK: Evaluating Jailbreak Guardrails for Large Language Models
di: Wang, Xunguang, et al.
Pubblicazione: (2025)
di: Wang, Xunguang, et al.
Pubblicazione: (2025)
Taxonomy, Evaluation and Exploitation of IPI-Centric LLM Agent Defense Frameworks
di: Ji, Zimo, et al.
Pubblicazione: (2025)
di: Ji, Zimo, et al.
Pubblicazione: (2025)
SelfDefend: LLMs Can Defend Themselves against Jailbreaking in a Practical Manner
di: Wang, Xunguang, et al.
Pubblicazione: (2024)
di: Wang, Xunguang, et al.
Pubblicazione: (2024)
Beyond Content Safety: Real-Time Monitoring for Reasoning Vulnerabilities in Large Language Models
di: Wang, Xunguang, et al.
Pubblicazione: (2026)
di: Wang, Xunguang, et al.
Pubblicazione: (2026)
An Empirical Study on Large Language Models in Accuracy and Robustness under Chinese Industrial Scenarios
di: Li, Zongjie, et al.
Pubblicazione: (2024)
di: Li, Zongjie, et al.
Pubblicazione: (2024)
Evaluating LLMs on Sequential API Call Through Automated Test Generation
di: Huang, Yuheng, et al.
Pubblicazione: (2025)
di: Huang, Yuheng, et al.
Pubblicazione: (2025)
API-guided Dataset Synthesis to Finetune Large Code Models
di: Li, Zongjie, et al.
Pubblicazione: (2024)
di: Li, Zongjie, et al.
Pubblicazione: (2024)
Differentiation-Based Extraction of Proprietary Data from Fine-Tuned LLMs
di: Li, Zongjie, et al.
Pubblicazione: (2025)
di: Li, Zongjie, et al.
Pubblicazione: (2025)
Understanding and Bridging the Planner-Coder Gap: A Systematic Study on the Robustness of Multi-Agent Systems for Code Generation
di: Lyu, Zongyi, et al.
Pubblicazione: (2025)
di: Lyu, Zongyi, et al.
Pubblicazione: (2025)
Low-Cost and Comprehensive Non-textual Input Fuzzing with LLM-Synthesized Input Generators
di: Zhang, Kunpeng, et al.
Pubblicazione: (2025)
di: Zhang, Kunpeng, et al.
Pubblicazione: (2025)
EAMET: Robust Massive Model Editing via Embedding Alignment Optimization
di: Dai, Yanbo, et al.
Pubblicazione: (2025)
di: Dai, Yanbo, et al.
Pubblicazione: (2025)
WARBENCH: A Comprehensive Benchmark for Evaluating LLMs in Military Decision-Making
di: Li, Zongjie, et al.
Pubblicazione: (2026)
di: Li, Zongjie, et al.
Pubblicazione: (2026)
Provable Coordination for LLM Agents via Message Sequence Charts
di: Bollig, Benedikt, et al.
Pubblicazione: (2026)
di: Bollig, Benedikt, et al.
Pubblicazione: (2026)
Once4All: Skeleton-Guided SMT Solver Fuzzing with LLM-Synthesized Generators
di: Sun, Maolin, et al.
Pubblicazione: (2025)
di: Sun, Maolin, et al.
Pubblicazione: (2025)
InstructTA: Instruction-Tuned Targeted Attack for Large Vision-Language Models
di: Wang, Xunguang, et al.
Pubblicazione: (2023)
di: Wang, Xunguang, et al.
Pubblicazione: (2023)
CodeARC: Benchmarking Reasoning Capabilities of LLM Agents for Inductive Program Synthesis
di: Wei, Anjiang, et al.
Pubblicazione: (2025)
di: Wei, Anjiang, et al.
Pubblicazione: (2025)
An LLM-powered Natural-to-Robotic Language Translation Framework with Correctness Guarantees
di: Chen, ZhenDong, et al.
Pubblicazione: (2025)
di: Chen, ZhenDong, et al.
Pubblicazione: (2025)
OBsmith: LLM-Powered JavaScript Obfuscator Testing
di: Jiang, Shan, et al.
Pubblicazione: (2025)
di: Jiang, Shan, et al.
Pubblicazione: (2025)
AIOS Compiler: LLM as Interpreter for Natural Language Programming and Flow Programming of AI Agents
di: Xu, Shuyuan, et al.
Pubblicazione: (2024)
di: Xu, Shuyuan, et al.
Pubblicazione: (2024)
LACUNA: Safe Agents as Recursive Program Holes
di: Zhao, Yaoyu, et al.
Pubblicazione: (2026)
di: Zhao, Yaoyu, et al.
Pubblicazione: (2026)
Benchmark Test-Time Scaling of General LLM Agents
di: Li, Xiaochuan, et al.
Pubblicazione: (2026)
di: Li, Xiaochuan, et al.
Pubblicazione: (2026)
AutoPDL: Automatic Prompt Optimization for LLM Agents
di: Spiess, Claudio, et al.
Pubblicazione: (2025)
di: Spiess, Claudio, et al.
Pubblicazione: (2025)
Disabling Self-Correction in Retrieval-Augmented Generation via Stealthy Retriever Poisoning
di: Dai, Yanbo, et al.
Pubblicazione: (2025)
di: Dai, Yanbo, et al.
Pubblicazione: (2025)
GuidedBench: Measuring and Mitigating the Evaluation Discrepancies of In-the-wild LLM Jailbreak Methods
di: Huang, Ruixuan, et al.
Pubblicazione: (2025)
di: Huang, Ruixuan, et al.
Pubblicazione: (2025)
Generating Pragmatic Examples to Train Neural Program Synthesizers
di: Vaduguru, Saujas, et al.
Pubblicazione: (2023)
di: Vaduguru, Saujas, et al.
Pubblicazione: (2023)
Inference Plans for Hybrid Particle Filtering
di: Cheng, Ellie Y., et al.
Pubblicazione: (2024)
di: Cheng, Ellie Y., et al.
Pubblicazione: (2024)
BuildBench: Benchmarking LLM Agents on Compiling Real-World Open-Source Software
di: Zhang, Zehua, et al.
Pubblicazione: (2025)
di: Zhang, Zehua, et al.
Pubblicazione: (2025)
Enhancing Dialogue State Tracking Models through LLM-backed User-Agents Simulation
di: Niu, Cheng, et al.
Pubblicazione: (2024)
di: Niu, Cheng, et al.
Pubblicazione: (2024)
Towards Formal Verification of LLM-Generated Code from Natural Language Prompts
di: Councilman, Aaron, et al.
Pubblicazione: (2025)
di: Councilman, Aaron, et al.
Pubblicazione: (2025)
CodeV: Empowering LLMs with HDL Generation through Multi-Level Summarization
di: Zhao, Yang, et al.
Pubblicazione: (2024)
di: Zhao, Yang, et al.
Pubblicazione: (2024)
A Declarative Language for Building And Orchestrating LLM-Powered Agent Workflows
di: Daunis, Ivan
Pubblicazione: (2025)
di: Daunis, Ivan
Pubblicazione: (2025)
HyGenar: An LLM-Driven Hybrid Genetic Algorithm for Few-Shot Grammar Generation
di: Tang, Weizhi, et al.
Pubblicazione: (2025)
di: Tang, Weizhi, et al.
Pubblicazione: (2025)
Tracking Capabilities for Safer Agents
di: Odersky, Martin, et al.
Pubblicazione: (2026)
di: Odersky, Martin, et al.
Pubblicazione: (2026)
Synthesizing Programmatic Reinforcement Learning Policies with Large Language Model Guided Search
di: Liu, Max, et al.
Pubblicazione: (2024)
di: Liu, Max, et al.
Pubblicazione: (2024)
Synthesizing Post-Training Data for LLMs through Multi-Agent Simulation
di: Tang, Shuo, et al.
Pubblicazione: (2024)
di: Tang, Shuo, et al.
Pubblicazione: (2024)
Documenti analoghi
-
STShield: Single-Token Sentinel for Real-Time Jailbreak Detection in Large Language Models
di: Wang, Xunguang, et al.
Pubblicazione: (2025) -
IP Leakage Attacks Targeting LLM-Based Multi-Agent Systems
di: Wang, Liwen, et al.
Pubblicazione: (2025) -
Split and Merge: Aligning Position Biases in LLM-based Evaluators
di: Li, Zongjie, et al.
Pubblicazione: (2023) -
Digging Into the Internal: Causality-Based Analysis of LLM Function Calling
di: Ji, Zhenlan, et al.
Pubblicazione: (2025) -
Measuring and Augmenting Large Language Models for Solving Capture-the-Flag Challenges
di: Ji, Zimo, et al.
Pubblicazione: (2025)