Buchumschlag

LLMs and their Limited Theory of Mind: Evaluating Mental State Annotations in Situated Dialogue

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Kowalyshyn, Katharine, Scheutz, Matthias
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Computation and Language
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Are you with me? A Framework for Detecting Mental Model Discrepancies in Task-Based Team Dialogues
von: Kowalyshyn, Katharine, et al.
Veröffentlicht: (2026)

IntelliProof: An Argumentation Network-based Conversational Helper for Organized Reflection
von: Miandoab, Kaveh Eskandari, et al.
Veröffentlicht: (2025)

MindDial: Belief Dynamics Tracking with Theory-of-Mind Modeling for Situated Neural Dialogue Generation
von: Qiu, Shuwen, et al.
Veröffentlicht: (2023)

Theory of Mind and Self-Attributions of Mentality are Dissociable in LLMs
von: Kim, Junsol, et al.
Veröffentlicht: (2026)

ToMATO: Verbalizing the Mental States of Role-Playing LLMs for Benchmarking Theory of Mind
von: Shinoda, Kazutoshi, et al.
Veröffentlicht: (2025)

ToM-SSI: Evaluating Theory of Mind in Situated Social Interactions
von: Bortoletto, Matteo, et al.
Veröffentlicht: (2025)

Where Norms and References Collide: Evaluating LLMs on Normative Reasoning
von: Abrams, Mitchell, et al.
Veröffentlicht: (2026)

PersuasiveToM: A Benchmark for Evaluating Machine Theory of Mind in Persuasive Dialogues
von: Yu, Fangxu, et al.
Veröffentlicht: (2025)

Using Machine Mental Imagery for Representing Common Ground in Situated Dialogue
von: Mohapatra, Biswesh, et al.
Veröffentlicht: (2026)

Exploring Safety Alignment Evaluation of LLMs in Chinese Mental Health Dialogues via LLM-as-Judge
von: Cai, Yunna, et al.
Veröffentlicht: (2025)

MIST: Towards Multi-dimensional Implicit BiaS Evaluation of LLMs for Theory of Mind
von: Li, Yanlin, et al.
Veröffentlicht: (2025)

Assessing LLMs in Art Contexts: Critique Generation and Theory of Mind Evaluation
von: Arita, Takaya, et al.
Veröffentlicht: (2025)

RecMind: Japanese Movie Recommendation Dialogue with Seeker's Internal State
von: Kodama, Takashi, et al.
Veröffentlicht: (2024)

Towards A Holistic Landscape of Situated Theory of Mind in Large Language Models
von: Ma, Ziqiao, et al.
Veröffentlicht: (2023)

On the Benchmarking of LLMs for Open-Domain Dialogue Evaluation
von: Mendonça, John, et al.
Veröffentlicht: (2024)

MindCube: Spatial Mental Modeling from Limited Views
von: Wang, Qineng, et al.
Veröffentlicht: (2025)

EnigmaToM: Improve LLMs' Theory-of-Mind Reasoning Capabilities with Neural Knowledge Base of Entity States
von: Xu, Hainiu, et al.
Veröffentlicht: (2025)

Do LLMs Exhibit Human-Like Reasoning? Evaluating Theory of Mind in LLMs for Open-Ended Responses
von: Amirizaniani, Maryam, et al.
Veröffentlicht: (2024)

Towards Dynamic Theory of Mind: Evaluating LLM Adaptation to Temporal Evolution of Human States
von: Xiao, Yang, et al.
Veröffentlicht: (2025)

Mind the Quote: Enabling Quotation-Aware Dialogue in LLMs via Plug-and-Play Modules
von: Zhang, Yueqi, et al.
Veröffentlicht: (2025)

Noise Injection Systemically Degrades Large Language Model Safety Guardrails
von: Shahani, Prithviraj Singh, et al.
Veröffentlicht: (2025)

OMIND: Framework for Knowledge Grounded Finetuning and Multi-Turn Dialogue Benchmark for Mental Health LLMs
von: Racha, Suraj, et al.
Veröffentlicht: (2026)

Large Language Model based Situational Dialogues for Second Language Learning
von: Xu, Shuyao, et al.
Veröffentlicht: (2024)

An Annotation Scheme and Classifier for Personal Facts in Dialogue
von: Zaitsev, Konstantin
Veröffentlicht: (2026)

Designing and Evaluating Dialogue LLMs for Co-Creative Improvised Theatre
von: Branch, Boyd, et al.
Veröffentlicht: (2024)

Soda-Eval: Open-Domain Dialogue Evaluation in the age of LLMs
von: Mendonça, John, et al.
Veröffentlicht: (2024)

Persuasion Should be Double-Blind: A Multi-Domain Dialogue Dataset With Faithfulness Based on Causal Theory of Mind
von: Zhang, Dingyi, et al.
Veröffentlicht: (2025)

TRACE: Real-Time Multimodal Common Ground Tracking in Situated Collaborative Dialogues
von: VanderHoeven, Hannah, et al.
Veröffentlicht: (2025)

Are AI Machines Making Humans Obsolete?
von: Scheutz, Matthias
Veröffentlicht: (2025)

CoMMET: To What Extent Can LLMs Perform Theory of Mind Tasks?
von: Chen, Ruirui, et al.
Veröffentlicht: (2026)

Multi-Turn Puzzles: Evaluating Interactive Reasoning and Strategic Dialogue in LLMs
von: Badola, Kartikeya, et al.
Veröffentlicht: (2025)

Are they lovers or friends? Evaluating LLMs' Social Reasoning in English and Korean Dialogues
von: Kim, Eunsu, et al.
Veröffentlicht: (2025)

Are LLMs Robust for Spoken Dialogues?
von: Mousavi, Seyed Mahed, et al.
Veröffentlicht: (2024)

Interpretable and Robust Dialogue State Tracking via Natural Language Summarization with LLMs
von: Carranza, Rafael, et al.
Veröffentlicht: (2025)

Evaluating Large Language Models in Theory of Mind Tasks
von: Kosinski, Michal
Veröffentlicht: (2023)

MentalQA: An Annotated Arabic Corpus for Questions and Answers of Mental Healthcare
von: Alhuzali, Hassan, et al.
Veröffentlicht: (2024)

Are LLMs Effective Negotiators? Systematic Evaluation of the Multifaceted Capabilities of LLMs in Negotiation Dialogues
von: Kwon, Deuksin, et al.
Veröffentlicht: (2024)

A Structured Framework for Evaluating and Enhancing Interpretive Capabilities of Multimodal LLMs in Culturally Situated Tasks
von: Yu, Haorui, et al.
Veröffentlicht: (2025)

MEDAL: A Framework for Benchmarking LLMs as Multilingual Open-Domain Dialogue Evaluators
von: Mendonça, John, et al.
Veröffentlicht: (2025)

UniToMBench: Integrating Perspective-Taking to Improve Theory of Mind in LLMs
von: Thiyagarajan, Prameshwar, et al.
Veröffentlicht: (2025)