Validating LLM-Generated Relevance Labels for Educational Resource Search

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Sebastian, Ratan J., Hoppe, Anett
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Information Retrieval
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Unraveling the Impact of Visual Complexity on Search as Learning
von: Gritz, Wolfgang, et al.
Veröffentlicht: (2025)

On the Influence of Reading Sequences on Knowledge Gain during Web Search
von: Gritz, Wolfgang, et al.
Veröffentlicht: (2024)

Beyond Yes and No: Improving Zero-Shot LLM Rankers via Scoring Fine-Grained Relevance Labels
von: Zhuang, Honglei, et al.
Veröffentlicht: (2023)

Judging the Judges: A Collection of LLM-Generated Relevance Judgements
von: Rahmani, Hossein A., et al.
Veröffentlicht: (2025)

Migrating a Job Search Relevance Function
von: Mountain, Bennett, et al.
Veröffentlicht: (2025)

Learning to Trust: Dynamic Utilization of Retrieval-Augmented Generation for E-commerce Search Relevance
von: Xu, Tingqiao, et al.
Veröffentlicht: (2025)

LLM-based Relevance Assessment for Web-Scale Search Evaluation at Pinterest
von: Wang, Han, et al.
Veröffentlicht: (2025)

LLM-Assisted Pseudo-Relevance Feedback
von: Otero, David, et al.
Veröffentlicht: (2026)

Scaling Search Relevance: Augmenting App Store Ranking with LLM-Generated Judgments
von: Christakopoulou, Evangelia, et al.
Veröffentlicht: (2026)

Middleman Bias in Advertising: Aligning Relevance of Keyphrase Recommendations with Search
von: Dey, Soumik, et al.
Veröffentlicht: (2025)

KuaiSearch: A Large-Scale E-Commerce Search Dataset for Recall, Ranking, and Relevance
von: Li, Yupeng, et al.
Veröffentlicht: (2026)

Fine-tuning Small Language Models as Efficient Enterprise Search Relevance Labelers
von: Kang, Yue, et al.
Veröffentlicht: (2026)

Generalized Pseudo-Relevance Feedback
von: Tu, Yiteng, et al.
Veröffentlicht: (2025)

HCMRM: A High-Consistency Multimodal Relevance Model for Search Ads
von: Gan, Guobing, et al.
Veröffentlicht: (2025)

Beyond Relevance: Improving User Engagement by Personalization for Short-Video Search
von: Bao, Wentian, et al.
Veröffentlicht: (2024)

Optimizing Generative Ranking Relevance via Reinforcement Learning in Xiaohongshu Search
von: Zeng, Ziyang, et al.
Veröffentlicht: (2025)

AR-Med: Automated Relevance Enhancement in Medical Search via LLM-Driven Information Augmentation
von: Wang, Chuyue, et al.
Veröffentlicht: (2025)

Contextual Relevance and Adaptive Sampling for LLM-Based Document Reranking
von: Huang, Jerry, et al.
Veröffentlicht: (2025)

Batched Self-Consistency Improves LLM Relevance Assessment and Ranking
von: Korikov, Anton, et al.
Veröffentlicht: (2025)

A Case-Driven Multi-Agent Framework for E-Commerce Search Relevance
von: Commerce Search Relevance Team
Veröffentlicht: (2026)

From Relevance to Authority: Authority-aware Generative Retrieval in Web Search Engines
von: Lee, Sunkyung, et al.
Veröffentlicht: (2026)

Robust Relevance Feedback for Interactive Known-Item Video Search
von: Ma, Zhixin, et al.
Veröffentlicht: (2025)

REALM: Recursive Relevance Modeling for LLM-based Document Re-Ranking
von: Wang, Pinhuan, et al.
Veröffentlicht: (2025)

When LLM Judges Inflate Scores: Exploring Overrating in Relevance Assessment
von: Yu, Chuting, et al.
Veröffentlicht: (2026)

Is Relevance Propagated from Retriever to Generator in RAG?
von: Tian, Fangzheng, et al.
Veröffentlicht: (2025)

Generative Retrieval Meets Multi-Graded Relevance
von: Tang, Yubao, et al.
Veröffentlicht: (2024)

LLMs can be Fooled into Labelling a Document as Relevant (best café near me; this paper is perfectly relevant)
von: Alaofi, Marwah, et al.
Veröffentlicht: (2025)

Domain Adaptation for Dense Retrieval and Conversational Dense Retrieval through Self-Supervision by Meticulous Pseudo-Relevance Labeling
von: Li, Minghan, et al.
Veröffentlicht: (2024)

LLM-Driven Usefulness Labeling for IR Evaluation
von: Dewan, Mouly, et al.
Veröffentlicht: (2025)

Graphs RAG at Scale: Beyond Retrieval-Augmented Generation With Labeled Property Graphs and Resource Description Framework for Complex and Unknown Search Spaces
von: Tadayon, Manie, et al.
Veröffentlicht: (2026)

Validating Search Query Simulations: A Taxonomy of Measures
von: Kruff, Andreas Konstantin, et al.
Veröffentlicht: (2026)

Improving Product Search Relevance with EAR-MP: A Solution for the CIKM 2025 AnalytiCup
von: Lim, JaeEun, et al.
Veröffentlicht: (2025)

Towards More Relevant Product Search Ranking Via Large Language Models: An Empirical Study
von: Liu, Qi, et al.
Veröffentlicht: (2024)

TRUE: A Reproducible Framework for LLM-Driven Relevance Judgment in Information Retrieval
von: Dewan, Mouly, et al.
Veröffentlicht: (2025)

Do LLM-judges Align with Human Relevance in Cranfield-style Recommender Evaluation?
von: Penha, Gustavo, et al.
Veröffentlicht: (2025)

Unified Supervision for Walmart's Sponsored Search Retrieval via Joint Semantic Relevance and Behavioral Engagement Modeling
von: Desai, Shasvat, et al.
Veröffentlicht: (2026)

Illusions of Relevance: Arbitrary Content Injection Attacks Deceive Retrievers, Rerankers, and LLM Judges
von: Tamber, Manveer Singh, et al.
Veröffentlicht: (2025)

Iti-Validator: A Guardrail Framework for Validating and Correcting LLM-Generated Itineraries
von: Gadbail, Shravan, et al.
Veröffentlicht: (2025)

Benchmarking LLM-based Relevance Judgment Methods
von: Arabzadeh, Negar, et al.
Veröffentlicht: (2025)

Improving Pinterest Search Relevance Using Large Language Models
von: Wang, Han, et al.
Veröffentlicht: (2024)