Identifying Key Terms in Prompts for Relevance Evaluation with GPT Models
Fuente:
arXiv
Salvato in:
| Autore principale: | Choi, Jaekeol |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Identifying Key Terms in Prompts for Relevance Evaluation with GPT Models
di: Jaekeol, Choi
Pubblicazione: (2026)
di: Jaekeol, Choi
Pubblicazione: (2026)
Beyond Content Relevance: Evaluating Instruction Following in Retrieval Models
di: Zhou, Jianqun, et al.
Pubblicazione: (2024)
di: Zhou, Jianqun, et al.
Pubblicazione: (2024)
Topic-Specific Classifiers are Better Relevance Judges than Prompted LLMs
di: Gienapp, Lukas, et al.
Pubblicazione: (2025)
di: Gienapp, Lukas, et al.
Pubblicazione: (2025)
The Cranfield II Relevance Assessments: A Critical Evaluation
di: Harter, Stephen P.
Pubblicazione: (1971)
di: Harter, Stephen P.
Pubblicazione: (1971)
Limitations of Automatic Relevance Assessments with Large Language Models for Fair and Reliable Retrieval Evaluation
di: Otero, David, et al.
Pubblicazione: (2024)
di: Otero, David, et al.
Pubblicazione: (2024)
LLMs Can Patch Up Missing Relevance Judgments in Evaluation
di: Upadhyay, Shivani, et al.
Pubblicazione: (2024)
di: Upadhyay, Shivani, et al.
Pubblicazione: (2024)
An Exam-based Evaluation Approach Beyond Traditional Relevance Judgments
di: Farzi, Naghmeh, et al.
Pubblicazione: (2024)
di: Farzi, Naghmeh, et al.
Pubblicazione: (2024)
Joint Evaluation of Fairness and Relevance in Recommender Systems with Pareto Frontier
di: Rampisela, Theresia Veronika, et al.
Pubblicazione: (2025)
di: Rampisela, Theresia Veronika, et al.
Pubblicazione: (2025)
Towards Boosting LLMs-driven Relevance Modeling with Progressive Retrieved Behavior-augmented Prompting
di: Chen, Zeyuan, et al.
Pubblicazione: (2024)
di: Chen, Zeyuan, et al.
Pubblicazione: (2024)
Metamorphic Evaluation of ChatGPT as a Recommender System
di: Khirbat, Madhurima, et al.
Pubblicazione: (2024)
di: Khirbat, Madhurima, et al.
Pubblicazione: (2024)
Unleashing the Native Recommendation Potential: LLM-Based Generative Recommendation via Structured Term Identifiers
di: Zhang, Zhiyang, et al.
Pubblicazione: (2026)
di: Zhang, Zhiyang, et al.
Pubblicazione: (2026)
Can We Trust Recommender System Fairness Evaluation? The Role of Fairness and Relevance
di: Rampisela, Theresia Veronika, et al.
Pubblicazione: (2024)
di: Rampisela, Theresia Veronika, et al.
Pubblicazione: (2024)
Do LLM-judges Align with Human Relevance in Cranfield-style Recommender Evaluation?
di: Penha, Gustavo, et al.
Pubblicazione: (2025)
di: Penha, Gustavo, et al.
Pubblicazione: (2025)
FGR-ColBERT: Identifying Fine-Grained Relevance Tokens During Retrieval
di: Jarolím, Antonín, et al.
Pubblicazione: (2026)
di: Jarolím, Antonín, et al.
Pubblicazione: (2026)
Exploring Large Language Models for Relevance Judgments in Tetun
di: de Jesus, Gabriel, et al.
Pubblicazione: (2024)
di: de Jesus, Gabriel, et al.
Pubblicazione: (2024)
Analyzing Adversarial Attacks on Sequence-to-Sequence Relevance Models
di: Parry, Andrew, et al.
Pubblicazione: (2024)
di: Parry, Andrew, et al.
Pubblicazione: (2024)
Multi-stage Large Language Model Pipelines Can Outperform GPT-4o in Relevance Assessment
di: Schnabel, Julian A., et al.
Pubblicazione: (2025)
di: Schnabel, Julian A., et al.
Pubblicazione: (2025)
REALM: Recursive Relevance Modeling for LLM-based Document Re-Ranking
di: Wang, Pinhuan, et al.
Pubblicazione: (2025)
di: Wang, Pinhuan, et al.
Pubblicazione: (2025)
HCMRM: A High-Consistency Multimodal Relevance Model for Search Ads
di: Gan, Guobing, et al.
Pubblicazione: (2025)
di: Gan, Guobing, et al.
Pubblicazione: (2025)
LLMJudge: LLMs for Relevance Judgments
di: Rahmani, Hossein A., et al.
Pubblicazione: (2024)
di: Rahmani, Hossein A., et al.
Pubblicazione: (2024)
Generalized Pseudo-Relevance Feedback
di: Tu, Yiteng, et al.
Pubblicazione: (2025)
di: Tu, Yiteng, et al.
Pubblicazione: (2025)
A Human-AI Comparative Analysis of Prompt Sensitivity in LLM-Based Relevance Judgment
di: Arabzadeh, Negar, et al.
Pubblicazione: (2025)
di: Arabzadeh, Negar, et al.
Pubblicazione: (2025)
RecGPT: A Foundation Model for Sequential Recommendation
di: Jiang, Yangqin, et al.
Pubblicazione: (2025)
di: Jiang, Yangqin, et al.
Pubblicazione: (2025)
Beyond Relevance: Evaluate and Improve Retrievers on Perspective Awareness
di: Zhao, Xinran, et al.
Pubblicazione: (2024)
di: Zhao, Xinran, et al.
Pubblicazione: (2024)
Axiomatic Causal Interventions for Reverse Engineering Relevance Computation in Neural Retrieval Models
di: Chen, Catherine, et al.
Pubblicazione: (2024)
di: Chen, Catherine, et al.
Pubblicazione: (2024)
Consolidating Ranking and Relevance Predictions of Large Language Models through Post-Processing
di: Yan, Le, et al.
Pubblicazione: (2024)
di: Yan, Le, et al.
Pubblicazione: (2024)
Discovering Biases in Information Retrieval Models Using Relevance Thesaurus as Global Explanation
di: Kim, Youngwoo, et al.
Pubblicazione: (2024)
di: Kim, Youngwoo, et al.
Pubblicazione: (2024)
Impact of Shallow vs. Deep Relevance Judgments on BERT-based Reranking Models
di: Iturra-Bocaz, Gabriel, et al.
Pubblicazione: (2025)
di: Iturra-Bocaz, Gabriel, et al.
Pubblicazione: (2025)
RAG vs. GraphRAG: A Systematic Evaluation and Key Insights
di: Han, Haoyu, et al.
Pubblicazione: (2025)
di: Han, Haoyu, et al.
Pubblicazione: (2025)
LLM-Assisted Pseudo-Relevance Feedback
di: Otero, David, et al.
Pubblicazione: (2026)
di: Otero, David, et al.
Pubblicazione: (2026)
LUCid: Redefining Relevance For Lifelong Personalization
di: Okite, Chimaobi, et al.
Pubblicazione: (2026)
di: Okite, Chimaobi, et al.
Pubblicazione: (2026)
TPRF: A Transformer-based Pseudo-Relevance Feedback Model for Efficient and Effective Retrieval
di: Li, Hang, et al.
Pubblicazione: (2024)
di: Li, Hang, et al.
Pubblicazione: (2024)
MemConflict: Evaluating Long-Term Memory Systems Under Memory Conflicts
di: Tao, Zhen, et al.
Pubblicazione: (2026)
di: Tao, Zhen, et al.
Pubblicazione: (2026)
UQABench: Evaluating User Embedding for Prompting LLMs in Personalized Question Answering
di: Liu, Langming, et al.
Pubblicazione: (2025)
di: Liu, Langming, et al.
Pubblicazione: (2025)
Impact and Relevance of Cognition Journal in the Field of Cognitive Science: An Evaluation
di: Batcha, M Sadik, et al.
Pubblicazione: (2025)
di: Batcha, M Sadik, et al.
Pubblicazione: (2025)
Augmenting Sequential Recommendation with Balanced Relevance and Diversity
di: Dang, Yizhou, et al.
Pubblicazione: (2024)
di: Dang, Yizhou, et al.
Pubblicazione: (2024)
Generative Retrieval Meets Multi-Graded Relevance
di: Tang, Yubao, et al.
Pubblicazione: (2024)
di: Tang, Yubao, et al.
Pubblicazione: (2024)
Don't Use LLMs to Make Relevance Judgments
di: Soboroff, Ian
Pubblicazione: (2024)
di: Soboroff, Ian
Pubblicazione: (2024)
Is Relevance Propagated from Retriever to Generator in RAG?
di: Tian, Fangzheng, et al.
Pubblicazione: (2025)
di: Tian, Fangzheng, et al.
Pubblicazione: (2025)
Migrating a Job Search Relevance Function
di: Mountain, Bennett, et al.
Pubblicazione: (2025)
di: Mountain, Bennett, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Identifying Key Terms in Prompts for Relevance Evaluation with GPT Models
di: Jaekeol, Choi
Pubblicazione: (2026) -
Beyond Content Relevance: Evaluating Instruction Following in Retrieval Models
di: Zhou, Jianqun, et al.
Pubblicazione: (2024) -
Topic-Specific Classifiers are Better Relevance Judges than Prompted LLMs
di: Gienapp, Lukas, et al.
Pubblicazione: (2025) -
The Cranfield II Relevance Assessments: A Critical Evaluation
di: Harter, Stephen P.
Pubblicazione: (1971) -
Limitations of Automatic Relevance Assessments with Large Language Models for Fair and Reliable Retrieval Evaluation
di: Otero, David, et al.
Pubblicazione: (2024)