Benchmarking Contextual Understanding for In-Car Conversational Systems
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Habicht, Philipp, Sorokin, Lev, Saydemir, Abdullah, Friedl, Ken E., Stocco, Andrea |
|---|---|
| Format: | Preprint |
| Publié: |
2025
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
Automated Factual Benchmarking for In-Car Conversational Systems using Large Language Models
par: Giebisch, Rafael, et autres
Publié: (2025)
par: Giebisch, Rafael, et autres
Publié: (2025)
STELLAR: A Search-Based Testing Framework for Large Language Model Applications
par: Sorokin, Lev, et autres
Publié: (2026)
par: Sorokin, Lev, et autres
Publié: (2026)
LoCar: Localization-Aware Evaluation of In-Vehicle Assistants through Fine-Grained Sociolinguistic Control
par: Jeong, Seogyeong, et autres
Publié: (2026)
par: Jeong, Seogyeong, et autres
Publié: (2026)
Simulator Ensembles for Trustworthy Autonomous Driving Testing
par: Sorokin, Lev, et autres
Publié: (2025)
par: Sorokin, Lev, et autres
Publié: (2025)
ConVerse: Benchmarking Contextual Safety in Agent-to-Agent Conversations
par: Gomaa, Amr, et autres
Publié: (2025)
par: Gomaa, Amr, et autres
Publié: (2025)
Span-Aggregatable, Contextualized Word Embeddings for Effective Phrase Mining
par: Orbach, Eyal, et autres
Publié: (2024)
par: Orbach, Eyal, et autres
Publié: (2024)
MasalBench: A Benchmark for Contextual and Cross-Cultural Understanding of Persian Proverbs in LLMs
par: Kalhor, Ghazal, et autres
Publié: (2026)
par: Kalhor, Ghazal, et autres
Publié: (2026)
Regulating Large Language Models: A Roundtable Report
par: Nicholas, Gabriel, et autres
Publié: (2024)
par: Nicholas, Gabriel, et autres
Publié: (2024)
PTCBENCH: Benchmarking Contextual Stability of Personality Traits in LLM Systems
par: Yu, Jiongchi, et autres
Publié: (2026)
par: Yu, Jiongchi, et autres
Publié: (2026)
KoDialogBench: Evaluating Conversational Understanding of Language Models with Korean Dialogue Benchmark
par: Jang, Seongbo, et autres
Publié: (2024)
par: Jang, Seongbo, et autres
Publié: (2024)
Contextualizing Search Queries In-Context Learning for Conversational Rewriting with LLMs
par: Wilson, Raymond, et autres
Publié: (2025)
par: Wilson, Raymond, et autres
Publié: (2025)
Emotion and Intent Joint Understanding in Multimodal Conversation: A Benchmarking Dataset
par: Liu, Rui, et autres
Publié: (2024)
par: Liu, Rui, et autres
Publié: (2024)
Multimodal Contextual Dialogue Breakdown Detection for Conversational AI Models
par: Miah, Md Messal Monem, et autres
Publié: (2024)
par: Miah, Md Messal Monem, et autres
Publié: (2024)
Evidence Contextualization and Counterfactual Attribution for Conversational QA over Heterogeneous Data with RAG Systems
par: Roy, Rishiraj Saha, et autres
Publié: (2024)
par: Roy, Rishiraj Saha, et autres
Publié: (2024)
MMRC: A Large-Scale Benchmark for Understanding Multimodal Large Language Model in Real-World Conversation
par: Xue, Haochen, et autres
Publié: (2025)
par: Xue, Haochen, et autres
Publié: (2025)
Multimodal Conversation Structure Understanding
par: Chang, Kent K., et autres
Publié: (2025)
par: Chang, Kent K., et autres
Publié: (2025)
HalluDetect: Detecting, Mitigating, and Benchmarking Hallucinations in Conversational Systems in the Legal Domain
par: Anaokar, Spandan, et autres
Publié: (2025)
par: Anaokar, Spandan, et autres
Publié: (2025)
Recording for Eyes, Not Echoing to Ears: Contextualized Spoken-to-Written Conversion of ASR Transcripts
par: Liu, Jiaqing, et autres
Publié: (2024)
par: Liu, Jiaqing, et autres
Publié: (2024)
Guiding the Search Towards Failure-Inducing Test Inputs Using Support Vector Machines
par: Sorokin, Lev, et autres
Publié: (2024)
par: Sorokin, Lev, et autres
Publié: (2024)
Finding Diamonds in Conversation Haystacks: A Benchmark for Conversational Data Retrieval
par: Lee, Yohan, et autres
Publié: (2025)
par: Lee, Yohan, et autres
Publié: (2025)
Agentic Conversational Search with Contextualized Reasoning via Reinforcement Learning
par: Mo, Fengran, et autres
Publié: (2026)
par: Mo, Fengran, et autres
Publié: (2026)
Massive Values in Self-Attention Modules are the Key to Contextual Knowledge Understanding
par: Jin, Mingyu, et autres
Publié: (2025)
par: Jin, Mingyu, et autres
Publié: (2025)
Understanding the Interplay between Parametric and Contextual Knowledge for Large Language Models
par: Cheng, Sitao, et autres
Publié: (2024)
par: Cheng, Sitao, et autres
Publié: (2024)
A Survey of Ontology Expansion for Conversational Understanding
par: Liang, Jinggui, et autres
Publié: (2024)
par: Liang, Jinggui, et autres
Publié: (2024)
CHIQ: Contextual History Enhancement for Improving Query Rewriting in Conversational Search
par: Mo, Fengran, et autres
Publié: (2024)
par: Mo, Fengran, et autres
Publié: (2024)
ContextualJailbreak: Evolutionary Red-Teaming via Simulated Conversational Priming
par: Béjar, Mario Rodríguez, et autres
Publié: (2026)
par: Béjar, Mario Rodríguez, et autres
Publié: (2026)
BABILong: Testing the Limits of LLMs with Long Context Reasoning-in-a-Haystack
par: Kuratov, Yuri, et autres
Publié: (2024)
par: Kuratov, Yuri, et autres
Publié: (2024)
FrugalPrompt: Reducing Contextual Overhead in Large Language Models via Token Attribution
par: Raiyan, Syed Rifat, et autres
Publié: (2025)
par: Raiyan, Syed Rifat, et autres
Publié: (2025)
CUE-M: Contextual Understanding and Enhanced Search with Multimodal Large Language Model
par: Go, Dongyoung, et autres
Publié: (2024)
par: Go, Dongyoung, et autres
Publié: (2024)
Hierarchical Embedding Fusion for Retrieval-Augmented Code Generation
par: Sorokin, Nikita, et autres
Publié: (2026)
par: Sorokin, Nikita, et autres
Publié: (2026)
Not All Denoising Steps Are Equal: Model Scheduling for Faster Masked Diffusion Language Models
par: Sedykh, Ivan, et autres
Publié: (2026)
par: Sedykh, Ivan, et autres
Publié: (2026)
Mining Contextualized Visual Associations from Images for Creativity Understanding
par: Sahu, Ananya, et autres
Publié: (2025)
par: Sahu, Ananya, et autres
Publié: (2025)
CLARITY: A Framework and Benchmark for Conversational Language Ambiguity and Unanswerability in Interactive NL2SQL Systems
par: Sarwar, Tabinda, et autres
Publié: (2026)
par: Sarwar, Tabinda, et autres
Publié: (2026)
In Search of Needles in a 11M Haystack: Recurrent Memory Finds What LLMs Miss
par: Kuratov, Yuri, et autres
Publié: (2024)
par: Kuratov, Yuri, et autres
Publié: (2024)
Query Understanding in LLM-based Conversational Information Seeking
par: Yuan, Yifei, et autres
Publié: (2025)
par: Yuan, Yifei, et autres
Publié: (2025)
A Personalized Conversational Benchmark: Towards Simulating Personalized Conversations
par: Li, Li, et autres
Publié: (2025)
par: Li, Li, et autres
Publié: (2025)
Contextual ASR Error Handling with LLMs Augmentation for Goal-Oriented Conversational AI
par: Asano, Yuya, et autres
Publié: (2025)
par: Asano, Yuya, et autres
Publié: (2025)
Culturally-Aware Conversations: A Framework & Benchmark for LLMs
par: Havaldar, Shreya, et autres
Publié: (2025)
par: Havaldar, Shreya, et autres
Publié: (2025)
Trust Modeling in Counseling Conversations: A Benchmark Study
par: Srivastava, Aseem, et autres
Publié: (2025)
par: Srivastava, Aseem, et autres
Publié: (2025)
CI-Work: Benchmarking Contextual Integrity in Enterprise LLM Agents
par: Fu, Wenjie, et autres
Publié: (2026)
par: Fu, Wenjie, et autres
Publié: (2026)
Documents similaires
-
Automated Factual Benchmarking for In-Car Conversational Systems using Large Language Models
par: Giebisch, Rafael, et autres
Publié: (2025) -
STELLAR: A Search-Based Testing Framework for Large Language Model Applications
par: Sorokin, Lev, et autres
Publié: (2026) -
LoCar: Localization-Aware Evaluation of In-Vehicle Assistants through Fine-Grained Sociolinguistic Control
par: Jeong, Seogyeong, et autres
Publié: (2026) -
Simulator Ensembles for Trustworthy Autonomous Driving Testing
par: Sorokin, Lev, et autres
Publié: (2025) -
ConVerse: Benchmarking Contextual Safety in Agent-to-Agent Conversations
par: Gomaa, Amr, et autres
Publié: (2025)