THELMA: Task Based Holistic Evaluation of Large Language Model Applications-RAG Question Answering
Fuente:
arXiv
Gespeichert in:
| Hauptverfasser: | Patel, Udita, Mulkar, Rutu, Roberts, Jay, Senthilkumar, Cibi Chakravarthy, Gandhi, Sujay, Zheng, Xiaofei, Nayyar, Naumaan, Kalra, Parul, Castrillo, Rafael |
|---|---|
| Format: | Preprint |
| Veröffentlicht: |
2025
|
| Schlagworte: | |
| Online-Zugang: | |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
Ähnliche Einträge
Mind the Goal: Data-Efficient Goal-Oriented Evaluation of Conversational Agents and Chatbots using Teacher Models
von: Piskala, Deepak Babu, et al.
Veröffentlicht: (2025)
von: Piskala, Deepak Babu, et al.
Veröffentlicht: (2025)
Reconciling Methodological Paradigms: Employing Large Language Models as Novice Qualitative Research Assistants in Talent Management Research
von: Bhaduri, Sreyoshi, et al.
Veröffentlicht: (2024)
von: Bhaduri, Sreyoshi, et al.
Veröffentlicht: (2024)
Qualitative Insights Tool (QualIT): LLM Enhanced Topic Modeling
von: Kapoor, Satya, et al.
Veröffentlicht: (2024)
von: Kapoor, Satya, et al.
Veröffentlicht: (2024)
MultiFinRAG: An Optimized Multimodal Retrieval-Augmented Generation (RAG) Framework for Financial Question Answering
von: Gondhalekar, Chinmay, et al.
Veröffentlicht: (2025)
von: Gondhalekar, Chinmay, et al.
Veröffentlicht: (2025)
Assessment of RAG and Fine-Tuning for Industrial Question-Answering-Applications
von: Sturm, Jakob, et al.
Veröffentlicht: (2026)
von: Sturm, Jakob, et al.
Veröffentlicht: (2026)
HR-MultiWOZ: A Task Oriented Dialogue (TOD) Dataset for HR LLM Agent
von: Xu, Weijie, et al.
Veröffentlicht: (2024)
von: Xu, Weijie, et al.
Veröffentlicht: (2024)
Bisecting K-Means in RAG for Enhancing Question-Answering Tasks Performance in Telecommunications
von: Sousa, Pedro, et al.
Veröffentlicht: (2025)
von: Sousa, Pedro, et al.
Veröffentlicht: (2025)
Structured RAG for Answering Aggregative Questions
von: Koshorek, Omri, et al.
Veröffentlicht: (2025)
von: Koshorek, Omri, et al.
Veröffentlicht: (2025)
From RAG to Agentic RAG for Faithful Islamic Question Answering
von: Bhatia, Gagan, et al.
Veröffentlicht: (2026)
von: Bhatia, Gagan, et al.
Veröffentlicht: (2026)
Neon: News Entity-Interaction Extraction for Enhanced Question Answering
von: Singhania, Sneha, et al.
Veröffentlicht: (2024)
von: Singhania, Sneha, et al.
Veröffentlicht: (2024)
Role of crosslinkers on the properties of bio‐based wood adhesives
von: Pratik Patel, et al.
Veröffentlicht: (2024)
von: Pratik Patel, et al.
Veröffentlicht: (2024)
SemRAG: Semantic Knowledge-Augmented RAG for Improved Question-Answering
von: Zhong, Kezhen, et al.
Veröffentlicht: (2025)
von: Zhong, Kezhen, et al.
Veröffentlicht: (2025)
CoDi: Conversational Distillation for Grounded Question Answering
von: Huber, Patrick, et al.
Veröffentlicht: (2024)
von: Huber, Patrick, et al.
Veröffentlicht: (2024)
AccurateRAG: A Framework for Building Accurate Retrieval-Augmented Question-Answering Applications
von: Nguyen, Linh The, et al.
Veröffentlicht: (2025)
von: Nguyen, Linh The, et al.
Veröffentlicht: (2025)
AURA Score: A Metric For Holistic Audio Question Answering Evaluation
von: Dixit, Satvik, et al.
Veröffentlicht: (2025)
von: Dixit, Satvik, et al.
Veröffentlicht: (2025)
Augmenting Question Answering with A Hybrid RAG Approach
von: Yang, Tianyi, et al.
Veröffentlicht: (2026)
von: Yang, Tianyi, et al.
Veröffentlicht: (2026)
Reading Between the Timelines: RAG for Answering Diachronic Questions
von: Lau, Kwun Hang, et al.
Veröffentlicht: (2025)
von: Lau, Kwun Hang, et al.
Veröffentlicht: (2025)
MultiCube-RAG for Multi-hop Question Answering
von: Shi, Jimeng, et al.
Veröffentlicht: (2026)
von: Shi, Jimeng, et al.
Veröffentlicht: (2026)
Evaluation of RAG Metrics for Question Answering in the Telecom Domain
von: Roychowdhury, Sujoy, et al.
Veröffentlicht: (2024)
von: Roychowdhury, Sujoy, et al.
Veröffentlicht: (2024)
MedCoT-RAG: Causal Chain-of-Thought RAG for Medical Question Answering
von: Wang, Ziyu, et al.
Veröffentlicht: (2025)
von: Wang, Ziyu, et al.
Veröffentlicht: (2025)
Comparing RAG and GraphRAG for Page-Level Retrieval Question Answering on Math Textbook
von: Chen, Eason, et al.
Veröffentlicht: (2025)
von: Chen, Eason, et al.
Veröffentlicht: (2025)
W-RAG: Weakly Supervised Dense Retrieval in RAG for Open-domain Question Answering
von: Nian, Jinming, et al.
Veröffentlicht: (2024)
von: Nian, Jinming, et al.
Veröffentlicht: (2024)
VQA-Levels: A Hierarchical Approach for Classifying Questions in VQA
von: Madaka, Madhuri Latha, et al.
Veröffentlicht: (2025)
von: Madaka, Madhuri Latha, et al.
Veröffentlicht: (2025)
Ontology-Aware RAG for Improved Question-Answering in Cybersecurity Education
von: Zhao, Chengshuai, et al.
Veröffentlicht: (2024)
von: Zhao, Chengshuai, et al.
Veröffentlicht: (2024)
Chronological Passage Assembling in RAG framework for Temporal Question Answering
von: Kim, Byeongjeong, et al.
Veröffentlicht: (2025)
von: Kim, Byeongjeong, et al.
Veröffentlicht: (2025)
A Graph-based RAG for Energy Efficiency Question Answering
von: Campi, Riccardo, et al.
Veröffentlicht: (2025)
von: Campi, Riccardo, et al.
Veröffentlicht: (2025)
FARSIQA: Faithful and Advanced RAG System for Islamic Question Answering
von: Asl, Mohammad Aghajani, et al.
Veröffentlicht: (2025)
von: Asl, Mohammad Aghajani, et al.
Veröffentlicht: (2025)
RAG-based Question Answering over Heterogeneous Data and Text
von: Christmann, Philipp, et al.
Veröffentlicht: (2024)
von: Christmann, Philipp, et al.
Veröffentlicht: (2024)
First Token Probability Guided RAG for Telecom Question Answering
von: Chen, Tingwei, et al.
Veröffentlicht: (2025)
von: Chen, Tingwei, et al.
Veröffentlicht: (2025)
Enhanced Multimodal RAG-LLM for Accurate Visual Question Answering
von: Xue, Junxiao, et al.
Veröffentlicht: (2024)
von: Xue, Junxiao, et al.
Veröffentlicht: (2024)
RAG based Question-Answering for Contextual Response Prediction System
von: Veturi, Sriram, et al.
Veröffentlicht: (2024)
von: Veturi, Sriram, et al.
Veröffentlicht: (2024)
EfficientRAG: Efficient Retriever for Multi-Hop Question Answering
von: Zhuang, Ziyuan, et al.
Veröffentlicht: (2024)
von: Zhuang, Ziyuan, et al.
Veröffentlicht: (2024)
OCC-RAG: Optimal Cognitive Core for Faithful Question Answering
von: Savkin, Maksim, et al.
Veröffentlicht: (2026)
von: Savkin, Maksim, et al.
Veröffentlicht: (2026)
A Dual-Attention Learning Network with Word and Sentence Embedding for Medical Visual Question Answering
von: Huang, Xiaofei, et al.
Veröffentlicht: (2022)
von: Huang, Xiaofei, et al.
Veröffentlicht: (2022)
VoxRAG: A Step Toward Transcription-Free RAG Systems in Spoken Question Answering
von: Rackauckas, Zackary, et al.
Veröffentlicht: (2025)
von: Rackauckas, Zackary, et al.
Veröffentlicht: (2025)
RAG-IGBench: Innovative Evaluation for RAG-based Interleaved Generation in Open-domain Question Answering
von: Zhang, Rongyang, et al.
Veröffentlicht: (2025)
von: Zhang, Rongyang, et al.
Veröffentlicht: (2025)
ComposeRAG: A Modular and Composable RAG for Corpus-Grounded Multi-Hop Question Answering
von: Wu, Ruofan, et al.
Veröffentlicht: (2025)
von: Wu, Ruofan, et al.
Veröffentlicht: (2025)
Ensemble Transformer for Efficient and Accurate Ranking Tasks: an Application to Question Answering Systems
von: Matsubara, Yoshitomo, et al.
Veröffentlicht: (2022)
von: Matsubara, Yoshitomo, et al.
Veröffentlicht: (2022)
Decomposing Retrieval Failures in RAG for Long-Document Financial Question Answering
von: Kobeissi, Amine, et al.
Veröffentlicht: (2026)
von: Kobeissi, Amine, et al.
Veröffentlicht: (2026)
Traceable Cross-Source RAG for Chinese Tibetan Medicine Question Answering
von: Chen, Fengxian, et al.
Veröffentlicht: (2026)
von: Chen, Fengxian, et al.
Veröffentlicht: (2026)
Ähnliche Einträge
-
Mind the Goal: Data-Efficient Goal-Oriented Evaluation of Conversational Agents and Chatbots using Teacher Models
von: Piskala, Deepak Babu, et al.
Veröffentlicht: (2025) -
Reconciling Methodological Paradigms: Employing Large Language Models as Novice Qualitative Research Assistants in Talent Management Research
von: Bhaduri, Sreyoshi, et al.
Veröffentlicht: (2024) -
Qualitative Insights Tool (QualIT): LLM Enhanced Topic Modeling
von: Kapoor, Satya, et al.
Veröffentlicht: (2024) -
MultiFinRAG: An Optimized Multimodal Retrieval-Augmented Generation (RAG) Framework for Financial Question Answering
von: Gondhalekar, Chinmay, et al.
Veröffentlicht: (2025) -
Assessment of RAG and Fine-Tuning for Industrial Question-Answering-Applications
von: Sturm, Jakob, et al.
Veröffentlicht: (2026)