Do LLM-judges Align with Human Relevance in Cranfield-style Recommender Evaluation?
Fuente:
arXiv
Gespeichert in:
| Hauptverfasser: | Penha, Gustavo, Petrov, Aleksandr V., Hauff, Claudia, Palumbo, Enrico, Vardasbi, Ali, D'Amico, Edoardo, Fabbri, Francesco, Wang, Alice, Chandar, Praveen, Lindstrom, Henrik, Bouchard, Hugues, Lalmas, Mounia |
|---|---|
| Format: | Preprint |
| Veröffentlicht: |
2025
|
| Schlagworte: | |
| Online-Zugang: | |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
Ähnliche Einträge
Adaptive Repetition for Mitigating Position Bias in LLM-Based Ranking
von: Vardasbi, Ali, et al.
Veröffentlicht: (2025)
von: Vardasbi, Ali, et al.
Veröffentlicht: (2025)
Bridging Search and Recommendation in Generative Retrieval: Does One Task Help the Other?
von: Penha, Gustavo, et al.
Veröffentlicht: (2024)
von: Penha, Gustavo, et al.
Veröffentlicht: (2024)
Semantic IDs for Joint Generative Search and Recommendation
von: Penha, Gustavo, et al.
Veröffentlicht: (2025)
von: Penha, Gustavo, et al.
Veröffentlicht: (2025)
Aligned Query Expansion: Efficient Query Expansion for Information Retrieval through LLM Alignment
von: Yang, Adam, et al.
Veröffentlicht: (2025)
von: Yang, Adam, et al.
Veröffentlicht: (2025)
Text2Tracks: Prompt-based Music Recommendation via Generative Retrieval
von: Palumbo, Enrico, et al.
Veröffentlicht: (2025)
von: Palumbo, Enrico, et al.
Veröffentlicht: (2025)
Evaluating Podcast Recommendations with Profile-Aware LLM-as-a-Judge
von: Fabbri, Francesco, et al.
Veröffentlicht: (2025)
von: Fabbri, Francesco, et al.
Veröffentlicht: (2025)
Towards Graph Foundation Models for Personalization
von: Damianou, Andreas, et al.
Veröffentlicht: (2024)
von: Damianou, Andreas, et al.
Veröffentlicht: (2024)
Policy-as-Prompt: Rethinking Content Moderation in the Age of Large Language Models
von: Palla, Konstantina, et al.
Veröffentlicht: (2025)
von: Palla, Konstantina, et al.
Veröffentlicht: (2025)
Primal-Dual Guided Decoding for Constrained Discrete Diffusion
von: Tomasi, Federico, et al.
Veröffentlicht: (2026)
von: Tomasi, Federico, et al.
Veröffentlicht: (2026)
Prompt-to-Slate: Diffusion Models for Prompt-Conditioned Slate Generation
von: Tomasi, Federico, et al.
Veröffentlicht: (2024)
von: Tomasi, Federico, et al.
Veröffentlicht: (2024)
The Cranfield II Relevance Assessments: A Critical Evaluation
von: Harter, Stephen P.
Veröffentlicht: (1971)
von: Harter, Stephen P.
Veröffentlicht: (1971)
Describe What You See with Multimodal Large Language Models to Enhance Video Recommendations
von: De Nadai, Marco, et al.
Veröffentlicht: (2025)
von: De Nadai, Marco, et al.
Veröffentlicht: (2025)
Personalized Audiobook Recommendations at Spotify Through Graph Neural Networks
von: De Nadai, Marco, et al.
Veröffentlicht: (2024)
von: De Nadai, Marco, et al.
Veröffentlicht: (2024)
Aligning GPTRec with Beyond-Accuracy Goals with Reinforcement Learning
von: Petrov, Aleksandr, et al.
Veröffentlicht: (2024)
von: Petrov, Aleksandr, et al.
Veröffentlicht: (2024)
AudioBoost: Increasing Audiobook Retrievability in Spotify Search with Synthetic Query Generation
von: Palumbo, Enrico, et al.
Veröffentlicht: (2025)
von: Palumbo, Enrico, et al.
Veröffentlicht: (2025)
Long-term Off-Policy Evaluation and Learning
von: Saito, Yuta, et al.
Veröffentlicht: (2024)
von: Saito, Yuta, et al.
Veröffentlicht: (2024)
Dataset-Agnostic Recommender Systems
von: Wijaya, Tri Kurniawan, et al.
Veröffentlicht: (2025)
von: Wijaya, Tri Kurniawan, et al.
Veröffentlicht: (2025)
Collation_Lucianic_1Macc_1-7_NOTE_35
von: D'Amico, Davide
Veröffentlicht: (2026)
von: D'Amico, Davide
Veröffentlicht: (2026)
El poder de estar contigo / Rosy D'Amico
von: D'Amico, Rosy
Veröffentlicht: (2016)
von: D'Amico, Rosy
Veröffentlicht: (2016)
La cuestión ambiental en disputa: el ambientalismo hegemónico y la corriente ambiental crítica. Lecturas desde y para América Latina
von: Paula D'Amico
Veröffentlicht: (2019)
von: Paula D'Amico
Veröffentlicht: (2019)
La recepción del pensamiento de Proclo en la obra de Nicolás de Cusa
von: Claudia D’Amico
Veröffentlicht: (2009)
von: Claudia D’Amico
Veröffentlicht: (2009)
Acerca del carácter irreductible de la mens humana en Nicolás de Cusa: unidad y número
von: Claudia D’Amico
Veröffentlicht: (2018)
von: Claudia D’Amico
Veröffentlicht: (2018)
PARMENIDES E IN PARMENIDEM. LA RECEPCIÓN DEL DIÁLOGO PLATÓNICO Y LA DE SUS INTÉRPRETES TARDOANTIGUOS EN LA DOCTRINA CUSANA DE LA NEGACIÓN
von: Claudia D’Amico
Veröffentlicht: (2020)
von: Claudia D’Amico
Veröffentlicht: (2020)
De la pobreza a la desigualdad. Discursos internacionales, efectos nacionales
von: Victoria D’Amico
Veröffentlicht: (2015)
von: Victoria D’Amico
Veröffentlicht: (2015)
La preparación psicológica de la selección nacional de fútbol de mayores de Venezuela (La Vinotinto): Períodos 2001-2007 y 2008-2013
von: A. D’Amico
Veröffentlicht: (2017)
von: A. D’Amico
Veröffentlicht: (2017)
Balance y desafíos de los estudios sociológicos sobre las desigualdades sociales en América Latica (1990-2016).
von: Victoria D’Amico
Veröffentlicht: (2016)
von: Victoria D’Amico
Veröffentlicht: (2016)
La dimensión visual de la práctica instrumental: perspectivas teóricas, metodológicas y experiencias “fílmicas” de investigación.
von: Leonardo D’Amico
Veröffentlicht: (2015)
von: Leonardo D’Amico
Veröffentlicht: (2015)
Electronic Thesis Development at Cranfield University
von: Bevan, Simon J.
Veröffentlicht: (2005)
von: Bevan, Simon J.
Veröffentlicht: (2005)
Stream: Scaling up Mechanistic Interpretability to Long Context in LLMs via Sparse Attention
von: Rosser, J, et al.
Veröffentlicht: (2025)
von: Rosser, J, et al.
Veröffentlicht: (2025)
Generalized User Representations for Transfer Learning
von: Fazelnia, Ghazal, et al.
Veröffentlicht: (2024)
von: Fazelnia, Ghazal, et al.
Veröffentlicht: (2024)
Non-reciprocal waves in two-dimensional electron systems with temperature gradient
von: Petrov, Aleksandr S.
Veröffentlicht: (2025)
von: Petrov, Aleksandr S.
Veröffentlicht: (2025)
A Unified Language Model for Large Scale Search, Recommendation, and Reasoning
von: De Nadai, Marco, et al.
Veröffentlicht: (2026)
von: De Nadai, Marco, et al.
Veröffentlicht: (2026)
EDUCACIÓN FÍSICA DE CALIDAD: ¿DE DÓNDE SURGE ESTE PLANTEAMIENTO?
von: Rosa López-D’Amico
Veröffentlicht: (2019)
von: Rosa López-D’Amico
Veröffentlicht: (2019)
La definición de la desigualdad en las agendas recientes de Los organismos internacionales para América Latina
von: María Victoria D'Amico
Veröffentlicht: (2016)
von: María Victoria D'Amico
Veröffentlicht: (2016)
Intercropping maize and succession crops alters the weed community in common bean under no-tillage
von: Victor D’Amico-Damião
Veröffentlicht: (2020)
von: Victor D’Amico-Damião
Veröffentlicht: (2020)
Estudio multicéntrico de deterioro cognitivo en lupus eritematoso sistémico: ECLES
von: M.A. D’Amico
Veröffentlicht: (2015)
von: M.A. D’Amico
Veröffentlicht: (2015)
Anticuerpos anti-Golgi en las enfermedades del tejido conectivo
von: M.A. D’Amico
Veröffentlicht: (2012)
von: M.A. D’Amico
Veröffentlicht: (2012)
Características de Personalidade e Qualidade de Vida de Gestores no Rio Grande do Sul
von: Simoni Missel D'Amico
Veröffentlicht: (2012)
von: Simoni Missel D'Amico
Veröffentlicht: (2012)
RBoard: A Unified Platform for Reproducible and Reusable Recommender System Benchmarks
von: Shao, Xinyang, et al.
Veröffentlicht: (2024)
von: Shao, Xinyang, et al.
Veröffentlicht: (2024)
The rasch approach "objective measurement" in the presence of subjective evaluation from "judges"
von: Enrico Gori
Veröffentlicht: (2006)
von: Enrico Gori
Veröffentlicht: (2006)
Ähnliche Einträge
-
Adaptive Repetition for Mitigating Position Bias in LLM-Based Ranking
von: Vardasbi, Ali, et al.
Veröffentlicht: (2025) -
Bridging Search and Recommendation in Generative Retrieval: Does One Task Help the Other?
von: Penha, Gustavo, et al.
Veröffentlicht: (2024) -
Semantic IDs for Joint Generative Search and Recommendation
von: Penha, Gustavo, et al.
Veröffentlicht: (2025) -
Aligned Query Expansion: Efficient Query Expansion for Information Retrieval through LLM Alignment
von: Yang, Adam, et al.
Veröffentlicht: (2025) -
Text2Tracks: Prompt-based Music Recommendation via Generative Retrieval
von: Palumbo, Enrico, et al.
Veröffentlicht: (2025)