ECoh: Turn-level Coherence Evaluation for Multilingual Dialogues
Fuente:
arXiv
Salvato in:
| Autori principali: | Mendonça, John, Trancoso, Isabel, Lavie, Alon |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
MEDAL: A Framework for Benchmarking LLMs as Multilingual Open-Domain Dialogue Evaluators
di: Mendonça, John, et al.
Pubblicazione: (2025)
di: Mendonça, John, et al.
Pubblicazione: (2025)
On the Benchmarking of LLMs for Open-Domain Dialogue Evaluation
di: Mendonça, John, et al.
Pubblicazione: (2024)
di: Mendonça, John, et al.
Pubblicazione: (2024)
Soda-Eval: Open-Domain Dialogue Evaluation in the age of LLMs
di: Mendonça, John, et al.
Pubblicazione: (2024)
di: Mendonça, John, et al.
Pubblicazione: (2024)
Overview of Dialog System Evaluation Track: Dimensionality, Language, Culture and Safety at DSTC 12
di: Mendonça, John, et al.
Pubblicazione: (2025)
di: Mendonça, John, et al.
Pubblicazione: (2025)
Simulated Reasoning is Reasoning
di: Kempt, Hendrik, et al.
Pubblicazione: (2026)
di: Kempt, Hendrik, et al.
Pubblicazione: (2026)
Multi-Turn Puzzles: Evaluating Interactive Reasoning and Strategic Dialogue in LLMs
di: Badola, Kartikeya, et al.
Pubblicazione: (2025)
di: Badola, Kartikeya, et al.
Pubblicazione: (2025)
Multilingual Dialogue Generation and Localization with Dialogue Act Scripting
di: Vasselli, Justin, et al.
Pubblicazione: (2025)
di: Vasselli, Justin, et al.
Pubblicazione: (2025)
Learning an Efficient Multi-Turn Dialogue Evaluator from Multiple LLM Judges
di: Tang, Yuqi, et al.
Pubblicazione: (2025)
di: Tang, Yuqi, et al.
Pubblicazione: (2025)
MedAidDialog: A Multilingual Multi-Turn Medical Dialogue Dataset for Accessible Healthcare
di: Nigam, Shubham Kumar, et al.
Pubblicazione: (2026)
di: Nigam, Shubham Kumar, et al.
Pubblicazione: (2026)
TD-EVAL: Revisiting Task-Oriented Dialogue Evaluation by Combining Turn-Level Precision with Dialogue-Level Comparisons
di: Acikgoz, Emre Can, et al.
Pubblicazione: (2025)
di: Acikgoz, Emre Can, et al.
Pubblicazione: (2025)
Discourse Diversity in Multi-Turn Empathic Dialogue
di: Zhan, Hongli, et al.
Pubblicazione: (2026)
di: Zhan, Hongli, et al.
Pubblicazione: (2026)
Dialogue Telemetry: Turn-Level Instrumentation for Autonomous Information Gathering
di: Panagopoulos, Dimitris, et al.
Pubblicazione: (2026)
di: Panagopoulos, Dimitris, et al.
Pubblicazione: (2026)
SEAD: Self-Evolving Agent for Multi-Turn Service Dialogue
di: Dai, Yuqin, et al.
Pubblicazione: (2026)
di: Dai, Yuqin, et al.
Pubblicazione: (2026)
SafeTy Reasoning Elicitation Alignment for Multi-Turn Dialogues
di: Kuo, Martin, et al.
Pubblicazione: (2025)
di: Kuo, Martin, et al.
Pubblicazione: (2025)
CoSafe: Evaluating Large Language Model Safety in Multi-Turn Dialogue Coreference
di: Yu, Erxin, et al.
Pubblicazione: (2024)
di: Yu, Erxin, et al.
Pubblicazione: (2024)
DIALIGHT: Lightweight Multilingual Development and Evaluation of Task-Oriented Dialogue Systems with Large Language Models
di: Hu, Songbo, et al.
Pubblicazione: (2024)
di: Hu, Songbo, et al.
Pubblicazione: (2024)
Unveiling Biases while Embracing Sustainability: Assessing the Dual Challenges of Automatic Speech Recognition Systems
di: Kulkarni, Ajinkya, et al.
Pubblicazione: (2025)
di: Kulkarni, Ajinkya, et al.
Pubblicazione: (2025)
Syn-TurnTurk: A Synthetic Dataset for Turn-Taking Prediction in Turkish Dialogues
di: Bayrak, Ahmet Tuğrul, et al.
Pubblicazione: (2026)
di: Bayrak, Ahmet Tuğrul, et al.
Pubblicazione: (2026)
Multi-IF: Benchmarking LLMs on Multi-Turn and Multilingual Instructions Following
di: He, Yun, et al.
Pubblicazione: (2024)
di: He, Yun, et al.
Pubblicazione: (2024)
User-Oriented Multi-Turn Dialogue Generation with Tool Use at scale
di: Cho, Jungho, et al.
Pubblicazione: (2026)
di: Cho, Jungho, et al.
Pubblicazione: (2026)
Rethinking Stateful Tool Use in Multi-Turn Dialogues: Benchmarks and Challenges
di: Wang, Hongru, et al.
Pubblicazione: (2025)
di: Wang, Hongru, et al.
Pubblicazione: (2025)
Enhancing Personalized Multi-Turn Dialogue with Curiosity Reward
di: Wan, Yanming, et al.
Pubblicazione: (2025)
di: Wan, Yanming, et al.
Pubblicazione: (2025)
InfoQuest: Evaluating Multi-Turn Dialogue Agents for Open-Ended Conversations with Hidden Context
di: de Oliveira, Bryan L. M., et al.
Pubblicazione: (2025)
di: de Oliveira, Bryan L. M., et al.
Pubblicazione: (2025)
MTMCS-Bench: Evaluating Contextual Safety of Multimodal Large Language Models in Multi-Turn Dialogues
di: Liu, Zheyuan, et al.
Pubblicazione: (2026)
di: Liu, Zheyuan, et al.
Pubblicazione: (2026)
SKG-Eval: Stateful Evaluation of Multi-Turn Dialogue via Incremental Semantic Knowledge Graphs
di: Shil, Avijit, et al.
Pubblicazione: (2026)
di: Shil, Avijit, et al.
Pubblicazione: (2026)
DeepDialogue: A Multi-Turn Emotionally-Rich Spoken Dialogue Dataset
di: Koudounas, Alkis, et al.
Pubblicazione: (2025)
di: Koudounas, Alkis, et al.
Pubblicazione: (2025)
DIAL: Direct Iterative Adversarial Learning for Realistic Multi-Turn Dialogue Simulation
di: Zhu, Ziyi, et al.
Pubblicazione: (2025)
di: Zhu, Ziyi, et al.
Pubblicazione: (2025)
PingPong: A Natural Benchmark for Multi-Turn Code-Switching Dialogues
di: Farhansyah, Mohammad Rifqi, et al.
Pubblicazione: (2026)
di: Farhansyah, Mohammad Rifqi, et al.
Pubblicazione: (2026)
Turning English-centric LLMs Into Polyglots: How Much Multilinguality Is Needed?
di: Kew, Tannon, et al.
Pubblicazione: (2023)
di: Kew, Tannon, et al.
Pubblicazione: (2023)
Inductive-Deductive Strategy Reuse for Multi-Turn Instructional Dialogues
di: Ou, Jiao, et al.
Pubblicazione: (2024)
di: Ou, Jiao, et al.
Pubblicazione: (2024)
Training Turn-by-Turn Verifiers for Dialogue Tutoring Agents: The Curious Case of LLMs as Your Coding Tutors
di: Wang, Jian, et al.
Pubblicazione: (2025)
di: Wang, Jian, et al.
Pubblicazione: (2025)
Triadic Multi-party Voice Activity Projection for Turn-taking in Spoken Dialogue Systems
di: Elmers, Mikey, et al.
Pubblicazione: (2025)
di: Elmers, Mikey, et al.
Pubblicazione: (2025)
MT-Bench-101: A Fine-Grained Benchmark for Evaluating Large Language Models in Multi-Turn Dialogues
di: Bai, Ge, et al.
Pubblicazione: (2024)
di: Bai, Ge, et al.
Pubblicazione: (2024)
MTalk-Bench: Evaluating Speech-to-Speech Models in Multi-Turn Dialogues via Arena-style and Rubrics Protocols
di: Du, Yuhao, et al.
Pubblicazione: (2025)
di: Du, Yuhao, et al.
Pubblicazione: (2025)
Easy Turn: Integrating Acoustic and Linguistic Modalities for Robust Turn-Taking in Full-Duplex Spoken Dialogue Systems
di: Li, Guojian, et al.
Pubblicazione: (2025)
di: Li, Guojian, et al.
Pubblicazione: (2025)
Multilingual KokoroChat: A Multi-LLM Ensemble Translation Method for Creating a Multilingual Counseling Dialogue Dataset
di: Suzuki, Ryoma, et al.
Pubblicazione: (2026)
di: Suzuki, Ryoma, et al.
Pubblicazione: (2026)
RAG-DIVE: A Dynamic Approach for Multi-Turn Dialogue Evaluation in Retrieval-Augmented Generation
di: Brehme, Lorenz, et al.
Pubblicazione: (2026)
di: Brehme, Lorenz, et al.
Pubblicazione: (2026)
Audio MultiChallenge: A Multi-Turn Evaluation of Spoken Dialogue Systems on Natural Human Interaction
di: Gosai, Advait, et al.
Pubblicazione: (2025)
di: Gosai, Advait, et al.
Pubblicazione: (2025)
Synchronization and Turn-Taking in Full-Duplex Speech Dialogue Models
di: Riera, Pablo, et al.
Pubblicazione: (2026)
di: Riera, Pablo, et al.
Pubblicazione: (2026)
A Static and Dynamic Attention Framework for Multi Turn Dialogue Generation
di: Zhang, Wei-Nan, et al.
Pubblicazione: (2024)
di: Zhang, Wei-Nan, et al.
Pubblicazione: (2024)
Documenti analoghi
-
MEDAL: A Framework for Benchmarking LLMs as Multilingual Open-Domain Dialogue Evaluators
di: Mendonça, John, et al.
Pubblicazione: (2025) -
On the Benchmarking of LLMs for Open-Domain Dialogue Evaluation
di: Mendonça, John, et al.
Pubblicazione: (2024) -
Soda-Eval: Open-Domain Dialogue Evaluation in the age of LLMs
di: Mendonça, John, et al.
Pubblicazione: (2024) -
Overview of Dialog System Evaluation Track: Dimensionality, Language, Culture and Safety at DSTC 12
di: Mendonça, John, et al.
Pubblicazione: (2025) -
Simulated Reasoning is Reasoning
di: Kempt, Hendrik, et al.
Pubblicazione: (2026)