Are Multimodal Large Language Models Pragmatically Competent Listeners in Simple Reference Resolution Tasks?
Fuente:
arXiv
Salvato in:
| Autori principali: | Junker, Simeon, Ali, Manar, Koch, Larissa, Zarrieß, Sina, Buschmeier, Hendrik |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Reference Games as a Testbed for the Alignment of Model Uncertainty and Clarification Requests
di: Ali, Manar, et al.
Pubblicazione: (2026)
di: Ali, Manar, et al.
Pubblicazione: (2026)
Resilience through Scene Context in Visual Referring Expression Generation
di: Junker, Simeon, et al.
Pubblicazione: (2024)
di: Junker, Simeon, et al.
Pubblicazione: (2024)
How Hypocritical Is Your LLM judge? Listener-Speaker Asymmetries in the Pragmatic Competence of Large Language Models
di: Sieker, Judith, et al.
Pubblicazione: (2026)
di: Sieker, Judith, et al.
Pubblicazione: (2026)
The Illusion of Competence: Evaluating the Effect of Explanations on Users' Mental Models of Visual Question Answering Systems
di: Sieker, Judith, et al.
Pubblicazione: (2024)
di: Sieker, Judith, et al.
Pubblicazione: (2024)
SceneGram: Conceptualizing and Describing Tangrams in Scene Context
di: Junker, Simeon, et al.
Pubblicazione: (2025)
di: Junker, Simeon, et al.
Pubblicazione: (2025)
Dialogue Is Not Enough to Make a Communicative BabyLM (But Neither Is Developmentally Inspired Reinforcement Learning)
di: Padovani, Francesca, et al.
Pubblicazione: (2025)
di: Padovani, Francesca, et al.
Pubblicazione: (2025)
Are BabyLMs Deaf to Gricean Maxims? A Pragmatic Evaluation of Sample-efficient Language Models
di: Askari, Raha, et al.
Pubblicazione: (2025)
di: Askari, Raha, et al.
Pubblicazione: (2025)
Conversational Implicatures: Modelling Relevance Theory Probabilistically
di: Unger, Christoph, et al.
Pubblicazione: (2025)
di: Unger, Christoph, et al.
Pubblicazione: (2025)
The Frequency Confound in Language-Model Surprisal and Metaphor Novelty
di: Momen, Omar, et al.
Pubblicazione: (2026)
di: Momen, Omar, et al.
Pubblicazione: (2026)
Vision-Language Models Are Not Pragmatically Competent in Referring Expression Generation
di: Ma, Ziqiao, et al.
Pubblicazione: (2025)
di: Ma, Ziqiao, et al.
Pubblicazione: (2025)
Revisiting the Phenomenon of Syntactic Complexity Convergence on German Dialogue Data
di: Wang, Yu, et al.
Pubblicazione: (2024)
di: Wang, Yu, et al.
Pubblicazione: (2024)
The Pragmatic Mind of Machines: Tracing the Emergence of Pragmatic Competence in Large Language Models
di: Yu, Kefan, et al.
Pubblicazione: (2025)
di: Yu, Kefan, et al.
Pubblicazione: (2025)
Pragmatic Competence Evaluation of Large Language Models for the Korean Language
di: Park, Dojun, et al.
Pubblicazione: (2024)
di: Park, Dojun, et al.
Pubblicazione: (2024)
Identifying the Periodicity of Information in Natural Language
di: Ou, Yulin, et al.
Pubblicazione: (2025)
di: Ou, Yulin, et al.
Pubblicazione: (2025)
Subword models struggle with word learning, but surprisal hides it
di: Bunzeck, Bastian, et al.
Pubblicazione: (2025)
di: Bunzeck, Bastian, et al.
Pubblicazione: (2025)
Child-directed speech facilitates production, not comprehension, in BabyLMs
di: Bunzeck, Bastian, et al.
Pubblicazione: (2026)
di: Bunzeck, Bastian, et al.
Pubblicazione: (2026)
Model Interpretability and Rationale Extraction by Input Mask Optimization
di: Brinner, Marc, et al.
Pubblicazione: (2025)
di: Brinner, Marc, et al.
Pubblicazione: (2025)
Do Construction Distributions Shape Formal Language Learning In German BabyLMs?
di: Bunzeck, Bastian, et al.
Pubblicazione: (2025)
di: Bunzeck, Bastian, et al.
Pubblicazione: (2025)
Rationalizing Transformer Predictions via End-To-End Differentiable Self-Training
di: Brinner, Marc, et al.
Pubblicazione: (2025)
di: Brinner, Marc, et al.
Pubblicazione: (2025)
Efficient Scientific Full Text Classification: The Case of EICAT Impact Assessments
di: Brinner, Marc Felix, et al.
Pubblicazione: (2025)
di: Brinner, Marc Felix, et al.
Pubblicazione: (2025)
Small Language Models Also Work With Small Vocabularies: Probing the Linguistic Abilities of Grapheme- and Phoneme-Based Baby Llamas
di: Bunzeck, Bastian, et al.
Pubblicazione: (2024)
di: Bunzeck, Bastian, et al.
Pubblicazione: (2024)
Towards an Analysis of Discourse and Interactional Pragmatic Reasoning Capabilities of Large Language Models
di: Robrecht, Amelie, et al.
Pubblicazione: (2024)
di: Robrecht, Amelie, et al.
Pubblicazione: (2024)
Investigating the Representation of Backchannels and Fillers in Fine-tuned Language Models
di: Wang, Yu, et al.
Pubblicazione: (2025)
di: Wang, Yu, et al.
Pubblicazione: (2025)
SemCSE: Semantic Contrastive Sentence Embeddings Using LLM-Generated Summaries For Scientific Abstracts
di: Brinner, Marc, et al.
Pubblicazione: (2025)
di: Brinner, Marc, et al.
Pubblicazione: (2025)
LLMs Struggle to Reject False Presuppositions when Misinformation Stakes are High
di: Sieker, Judith, et al.
Pubblicazione: (2025)
di: Sieker, Judith, et al.
Pubblicazione: (2025)
Conversational Feedback in Scripted versus Spontaneous Dialogues: A Comparative Analysis
di: Pilán, Ildikó, et al.
Pubblicazione: (2023)
di: Pilán, Ildikó, et al.
Pubblicazione: (2023)
Predicting States of Understanding in Explanatory Interactions Using Cognitive Load-Related Linguistic Cues
di: Wang, Yu, et al.
Pubblicazione: (2026)
di: Wang, Yu, et al.
Pubblicazione: (2026)
SemCSE-Multi: Multifaceted and Decodable Embeddings for Aspect-Specific and Interpretable Scientific Domain Mapping
di: Brinner, Marc, et al.
Pubblicazione: (2025)
di: Brinner, Marc, et al.
Pubblicazione: (2025)
Enhancing Large Language Models with Neurosymbolic Reasoning for Multilingual Tasks
di: Nezhad, Sina Bagheri, et al.
Pubblicazione: (2025)
di: Nezhad, Sina Bagheri, et al.
Pubblicazione: (2025)
Enhancing Domain-Specific Encoder Models with LLM-Generated Data: How to Leverage Ontologies, and How to Do Without Them
di: Brinner, Marc, et al.
Pubblicazione: (2025)
di: Brinner, Marc, et al.
Pubblicazione: (2025)
Communicating with Speakers and Listeners of Different Pragmatic Levels
di: Naszadi, Kata, et al.
Pubblicazione: (2024)
di: Naszadi, Kata, et al.
Pubblicazione: (2024)
Can LLMs Ground when they (Don't) Know: A Study on Direct and Loaded Political Questions
di: Lachenmaier, Clara, et al.
Pubblicazione: (2025)
di: Lachenmaier, Clara, et al.
Pubblicazione: (2025)
Talking to a Know-It-All GPT or a Second-Guesser Claude? How Repair reveals unreliable Multi-Turn Behavior in LLMs
di: Lachenmaier, Clara, et al.
Pubblicazione: (2026)
di: Lachenmaier, Clara, et al.
Pubblicazione: (2026)
SimpleVQA: Multimodal Factuality Evaluation for Multimodal Large Language Models
di: Cheng, Xianfu, et al.
Pubblicazione: (2025)
di: Cheng, Xianfu, et al.
Pubblicazione: (2025)
Implicit Causality-biases in humans and LLMs as a tool for benchmarking LLM discourse capabilities
di: Kankowski, Florian, et al.
Pubblicazione: (2025)
di: Kankowski, Florian, et al.
Pubblicazione: (2025)
Evaluating Diversity in Automatic Poetry Generation
di: Chen, Yanran, et al.
Pubblicazione: (2024)
di: Chen, Yanran, et al.
Pubblicazione: (2024)
The InviTE Corpus: Annotating Invectives in Tudor English Texts for Computational Modeling
di: Spliethoff, Sophie, et al.
Pubblicazione: (2025)
di: Spliethoff, Sophie, et al.
Pubblicazione: (2025)
Mining for Species, Locations, Habitats, and Ecosystems from Scientific Papers in Invasion Biology: A Large-Scale Exploratory Study with Large Language Models
di: D'Souza, Jennifer, et al.
Pubblicazione: (2025)
di: D'Souza, Jennifer, et al.
Pubblicazione: (2025)
How Large Language Models are Designed to Hallucinate
di: Ackermann, Richard, et al.
Pubblicazione: (2025)
di: Ackermann, Richard, et al.
Pubblicazione: (2025)
Measuring Pragmatic Influence in Large Language Model Instructions
di: Geng, Yilin, et al.
Pubblicazione: (2026)
di: Geng, Yilin, et al.
Pubblicazione: (2026)
Documenti analoghi
-
Reference Games as a Testbed for the Alignment of Model Uncertainty and Clarification Requests
di: Ali, Manar, et al.
Pubblicazione: (2026) -
Resilience through Scene Context in Visual Referring Expression Generation
di: Junker, Simeon, et al.
Pubblicazione: (2024) -
How Hypocritical Is Your LLM judge? Listener-Speaker Asymmetries in the Pragmatic Competence of Large Language Models
di: Sieker, Judith, et al.
Pubblicazione: (2026) -
The Illusion of Competence: Evaluating the Effect of Explanations on Users' Mental Models of Visual Question Answering Systems
di: Sieker, Judith, et al.
Pubblicazione: (2024) -
SceneGram: Conceptualizing and Describing Tangrams in Scene Context
di: Junker, Simeon, et al.
Pubblicazione: (2025)