Buchumschlag

ProactiveEval: A Unified Evaluation Framework for Proactive Dialogue Agents

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Liu, Tianjian, Wan, Fanqi, Guo, Jiajian, Quan, Xiaojun
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Computation and Language Artificial Intelligence Human-Computer Interaction
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

ProAgent: Harnessing On-Demand Sensory Contexts for Proactive LLM Agent Systems in the Wild
von: Yang, Bufang, et al.
Veröffentlicht: (2025)

ContextAgent: Context-Aware Proactive LLM Agents with Open-World Sensory Perceptions
von: Yang, Bufang, et al.
Veröffentlicht: (2025)

Do Proactive Agents Really Need an LLM to Decide When to Wake and What to Anchor?
von: Liu, Xiaoze, et al.
Veröffentlicht: (2026)

Proactive Assistant Dialogue Generation from Streaming Egocentric Videos
von: Zhang, Yichi, et al.
Veröffentlicht: (2025)

Proactive Conversational Agents with Inner Thoughts
von: Liu, Xingyu Bruce, et al.
Veröffentlicht: (2024)

WundtGPT: Shaping Large Language Models To Be An Empathetic, Proactive Psychologist
von: Ren, Chenyu, et al.
Veröffentlicht: (2024)

PRISM: Festina Lente Proactivity -- Risk-Sensitive, Uncertainty-Aware Deliberation for Proactive Agents
von: Fu, Yuxuan, et al.
Veröffentlicht: (2026)

LalaEval: A Holistic Human Evaluation Framework for Domain-Specific Large Language Models
von: Sun, Chongyan, et al.
Veröffentlicht: (2024)

Evaluating Behavioral Alignment in Conflict Dialogue: A Multi-Dimensional Comparison of LLM Agents and Humans
von: Kwon, Deuksin, et al.
Veröffentlicht: (2025)

ComPeer: A Generative Conversational Agent for Proactive Peer Support
von: Liu, Tianjian, et al.
Veröffentlicht: (2024)

PASK: Toward Intent-Aware Proactive Agents with Long-Term Memory
von: Xie, Zhifei, et al.
Veröffentlicht: (2026)

FingerTip 20K: A Benchmark for Proactive and Personalized Mobile LLM Agents
von: Yang, Qinglong, et al.
Veröffentlicht: (2025)

Analyzing Cognitive Differences Among Large Language Models through the Lens of Social Worldview
von: Li, Jiatao, et al.
Veröffentlicht: (2025)

ProVox: Personalization and Proactive Planning for Situated Human-Robot Collaboration
von: Grannen, Jennifer, et al.
Veröffentlicht: (2025)

Proactive Agentic Whiteboards: Enhancing Diagrammatic Learning
von: Ellawela, Suveen, et al.
Veröffentlicht: (2025)

Evaluating Large Language Models in Analysing Classroom Dialogue
von: Long, Yun, et al.
Veröffentlicht: (2024)

SteerEval: A Framework for Evaluating Steerability with Natural Language Profiles for Recommendation
von: Zhou, Joyce, et al.
Veröffentlicht: (2026)

"Excuse me, may I say something..." CoLabScience, A Proactive AI Assistant for Biomedical Discovery and LLM-Expert Collaborations
von: Wu, Yang, et al.
Veröffentlicht: (2026)

Collaborative Gym: A Framework for Enabling and Evaluating Human-Agent Collaboration
von: Shao, Yijia, et al.
Veröffentlicht: (2024)

Collaborative Evaluation of Deepfake Text with Deliberation-Enhancing Dialogue Systems
von: Lee, Jooyoung, et al.
Veröffentlicht: (2025)

An Analysis of User Behaviors for Objectively Evaluating Spoken Dialogue Systems
von: Inoue, Koji, et al.
Veröffentlicht: (2024)

Advancing Speech Language Models by Scaling Supervised Fine-Tuning with Over 60,000 Hours of Synthetic Speech Dialogue Data
von: Zhao, Shuaijiang, et al.
Veröffentlicht: (2024)

EvalLM: Interactive Evaluation of Large Language Model Prompts on User-Defined Criteria
von: Kim, Tae Soo, et al.
Veröffentlicht: (2023)

MHSafeEval: Role-Aware Interaction-Level Evaluation of Mental Health Safety in Large Language Models
von: Lee, Suhyun, et al.
Veröffentlicht: (2026)

Evaluating LLM Adaptation to Sociodemographic Factors: User Profile vs. Dialogue History
von: Zhong, Qishuai, et al.
Veröffentlicht: (2025)

PatientHub: A Unified Framework for Patient Simulation
von: Sabour, Sahand, et al.
Veröffentlicht: (2026)

VeriLA: A Human-Centered Evaluation Framework for Interpretable Verification of LLM Agent Failures
von: Sung, Yoo Yeon, et al.
Veröffentlicht: (2025)

PULSE: Agentic Investigation with Passive Sensing for Proactive Intervention in Cancer Survivorship
von: Wang, Zhiyuan, et al.
Veröffentlicht: (2026)

Proactive Emotion Tracker: AI-Driven Continuous Mood and Emotion Monitoring
von: Asif, Mohammad, et al.
Veröffentlicht: (2024)

Towards Human-centered Proactive Conversational Agents
von: Deng, Yang, et al.
Veröffentlicht: (2024)

Satori: Towards Proactive AR Assistant with Belief-Desire-Intention User Modeling
von: Li, Chenyi, et al.
Veröffentlicht: (2024)

An Offline Mobile Conversational Agent for Mental Health Support: Learning from Emotional Dialogues and Psychological Texts with Student-Centered Evaluation
von: A, Vimaleswar, et al.
Veröffentlicht: (2025)

A Scalable Framework for Evaluating Health Language Models
von: Mallinar, Neil, et al.
Veröffentlicht: (2025)

VIDEE: Visual and Interactive Decomposition, Execution, and Evaluation of Text Analytics with Intelligent Agents
von: Lee, Sam Yu-Te, et al.
Veröffentlicht: (2025)

EducationQ: Evaluating LLMs' Teaching Capabilities Through Multi-Agent Dialogue Framework
von: Shi, Yao, et al.
Veröffentlicht: (2025)

A Risk Ontology for Evaluating AI-Powered Psychotherapy Virtual Agents
von: Steenstra, Ian, et al.
Veröffentlicht: (2025)

Causal Discovery and Counterfactual Reasoning to Optimize Persuasive Dialogue Policies
von: Zeng, Donghuo, et al.
Veröffentlicht: (2025)

Language Models in Dialogue: Conversational Maxims for Human-AI Interactions
von: Miehling, Erik, et al.
Veröffentlicht: (2024)

AI for Proactive Mental Health: A Multi-Institutional, Longitudinal, Randomized Controlled Trial
von: Cachia, Julie Y. A., et al.
Veröffentlicht: (2025)

CowPilot: A Framework for Autonomous and Human-Agent Collaborative Web Navigation
von: Huq, Faria, et al.
Veröffentlicht: (2025)