Judging with Personality and Confidence: A Study on Personality-Conditioned LLM Relevance Assessment
Fuente:
arXiv
Salvato in:
| Autori principali: | Chen, Nuo, Fang, Hanpei, Wang, Piaohong, Liu, Jiqun, Sakai, Tetsuya, Wu, Xiao-Ming |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2026
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Mitigating the Threshold Priming Effect in Large Language Model-Based Relevance Judgments via Personality Infusing
di: Chen, Nuo, et al.
Pubblicazione: (2025)
di: Chen, Nuo, et al.
Pubblicazione: (2025)
Decoy Effect In Search Interaction: Understanding User Behavior and Measuring System Vulnerability
di: Chen, Nuo, et al.
Pubblicazione: (2024)
di: Chen, Nuo, et al.
Pubblicazione: (2024)
Decoy Effect in Search Interaction: A Pilot Study
di: Chen, Nuo, et al.
Pubblicazione: (2023)
di: Chen, Nuo, et al.
Pubblicazione: (2023)
Do Large Language Models Favor Recent Content? A Study on Recency Bias in LLM-Based Reranking
di: Fang, Hanpei, et al.
Pubblicazione: (2025)
di: Fang, Hanpei, et al.
Pubblicazione: (2025)
AI Can Be Cognitively Biased: An Exploratory Study on Threshold Priming in LLM-Based Batch Relevance Assessment
di: Chen, Nuo, et al.
Pubblicazione: (2024)
di: Chen, Nuo, et al.
Pubblicazione: (2024)
Re-Rankers as Relevance Judges
di: Meng, Chuan, et al.
Pubblicazione: (2026)
di: Meng, Chuan, et al.
Pubblicazione: (2026)
Towards Personalized Deep Research: Benchmarks and Evaluations
di: Liang, Yuan, et al.
Pubblicazione: (2025)
di: Liang, Yuan, et al.
Pubblicazione: (2025)
MAPS: Motivation-Aware Personalized Search via LLM-Driven Consultation Alignment
di: Qin, Weicong, et al.
Pubblicazione: (2025)
di: Qin, Weicong, et al.
Pubblicazione: (2025)
Plans for Evaluating Structured Generative Search Summaries
di: Sakai, Tetsuya, et al.
Pubblicazione: (2026)
di: Sakai, Tetsuya, et al.
Pubblicazione: (2026)
Optimizing User Profiles via Contextual Bandits for Retrieval-Augmented LLM Personalization
di: Du, Linfeng, et al.
Pubblicazione: (2026)
di: Du, Linfeng, et al.
Pubblicazione: (2026)
How Vital is the Jurisprudential Relevance: Law Article Intervened Legal Case Retrieval and Matching
di: Xu, Nuo, et al.
Pubblicazione: (2025)
di: Xu, Nuo, et al.
Pubblicazione: (2025)
HLLM-Creator: Hierarchical LLM-based Personalized Creative Generation
di: Chen, Junyi, et al.
Pubblicazione: (2025)
di: Chen, Junyi, et al.
Pubblicazione: (2025)
PersonalAI: A Systematic Comparison of Knowledge Graph Storage and Retrieval Approaches for Personalized LLM agents
di: Menschikov, Mikhail, et al.
Pubblicazione: (2025)
di: Menschikov, Mikhail, et al.
Pubblicazione: (2025)
ResumeFlow: An LLM-facilitated Pipeline for Personalized Resume Generation and Refinement
di: Zinjad, Saurabh Bhausaheb, et al.
Pubblicazione: (2024)
di: Zinjad, Saurabh Bhausaheb, et al.
Pubblicazione: (2024)
Task Supportive and Personalized Human-Large Language Model Interaction: A User Study
di: Wang, Ben, et al.
Pubblicazione: (2024)
di: Wang, Ben, et al.
Pubblicazione: (2024)
Investigating LLM Variability in Personalized Conversational Information Retrieval
di: Lupart, Simon, et al.
Pubblicazione: (2025)
di: Lupart, Simon, et al.
Pubblicazione: (2025)
Bridging Personalization and Control in Scientific Personalized Search
di: Mysore, Sheshera, et al.
Pubblicazione: (2024)
di: Mysore, Sheshera, et al.
Pubblicazione: (2024)
VERDI: Single-Call Confidence Estimation for Verification-Based LLM Judges via Decomposed Inference
di: Qi, Jasmine, et al.
Pubblicazione: (2026)
di: Qi, Jasmine, et al.
Pubblicazione: (2026)
How to Leverage Personal Textual Knowledge for Personalized Conversational Information Retrieval
di: Mo, Fengran, et al.
Pubblicazione: (2024)
di: Mo, Fengran, et al.
Pubblicazione: (2024)
LLMs-as-Judges: A Comprehensive Survey on LLM-based Evaluation Methods
di: Li, Haitao, et al.
Pubblicazione: (2024)
di: Li, Haitao, et al.
Pubblicazione: (2024)
Rethinking LLM-Based Recommendations: A Personalized Query-Driven Parallel Integration
di: Han, Donghee, et al.
Pubblicazione: (2025)
di: Han, Donghee, et al.
Pubblicazione: (2025)
The Decoy Dilemma in Online Medical Information Evaluation: A Comparative Study of Credibility Assessments by LLM and Human Judges
di: Liu, Jiqun, et al.
Pubblicazione: (2024)
di: Liu, Jiqun, et al.
Pubblicazione: (2024)
ChatRetriever: Adapting Large Language Models for Generalized and Robust Conversational Dense Retrieval
di: Mao, Kelong, et al.
Pubblicazione: (2024)
di: Mao, Kelong, et al.
Pubblicazione: (2024)
A Large-Scale Study of Relevance Assessments with Large Language Models: An Initial Look
di: Upadhyay, Shivani, et al.
Pubblicazione: (2024)
di: Upadhyay, Shivani, et al.
Pubblicazione: (2024)
TRUE: A Reproducible Framework for LLM-Driven Relevance Judgment in Information Retrieval
di: Dewan, Mouly, et al.
Pubblicazione: (2025)
di: Dewan, Mouly, et al.
Pubblicazione: (2025)
Benchmarking LLM-based Relevance Judgment Methods
di: Arabzadeh, Negar, et al.
Pubblicazione: (2025)
di: Arabzadeh, Negar, et al.
Pubblicazione: (2025)
Retrieval Augmented Generation with Collaborative Filtering for Personalized Text Generation
di: Shi, Teng, et al.
Pubblicazione: (2025)
di: Shi, Teng, et al.
Pubblicazione: (2025)
PJB: A Reasoning-Aware Benchmark for Person-Job Retrieval
di: Wang, Guangzhi, et al.
Pubblicazione: (2026)
di: Wang, Guangzhi, et al.
Pubblicazione: (2026)
Iterative Critique-Refine Framework for Enhancing LLM Personalization
di: Maram, Durga Prasad, et al.
Pubblicazione: (2025)
di: Maram, Durga Prasad, et al.
Pubblicazione: (2025)
AR-Med: Automated Relevance Enhancement in Medical Search via LLM-Driven Information Augmentation
di: Wang, Chuyue, et al.
Pubblicazione: (2025)
di: Wang, Chuyue, et al.
Pubblicazione: (2025)
LLM-Rec: Personalized Recommendation via Prompting Large Language Models
di: Lyu, Hanjia, et al.
Pubblicazione: (2023)
di: Lyu, Hanjia, et al.
Pubblicazione: (2023)
Adaptive Personalized Conversational Information Retrieval
di: Mo, Fengran, et al.
Pubblicazione: (2025)
di: Mo, Fengran, et al.
Pubblicazione: (2025)
Improving Topic Relevance Model by Mix-structured Summarization and LLM-based Data Augmentation
di: Liu, Yizhu, et al.
Pubblicazione: (2024)
di: Liu, Yizhu, et al.
Pubblicazione: (2024)
Beyond Relevance: Evaluate and Improve Retrievers on Perspective Awareness
di: Zhao, Xinran, et al.
Pubblicazione: (2024)
di: Zhao, Xinran, et al.
Pubblicazione: (2024)
SPAR: Personalized Content-Based Recommendation via Long Engagement Attention
di: Zhang, Chiyu, et al.
Pubblicazione: (2024)
di: Zhang, Chiyu, et al.
Pubblicazione: (2024)
When Large Language Models Meet Personalization: Perspectives of Challenges and Opportunities
di: Chen, Jin, et al.
Pubblicazione: (2023)
di: Chen, Jin, et al.
Pubblicazione: (2023)
Evaluating LLMs for Gender Disparities in Notable Persons
di: Rhue, Lauren, et al.
Pubblicazione: (2024)
di: Rhue, Lauren, et al.
Pubblicazione: (2024)
"Knowing When You Don't Know": A Multilingual Relevance Assessment Dataset for Robust Retrieval-Augmented Generation
di: Thakur, Nandan, et al.
Pubblicazione: (2023)
di: Thakur, Nandan, et al.
Pubblicazione: (2023)
CSRM-LLM: Embracing Multilingual LLMs for Cold-Start Relevance Matching in Emerging E-commerce Markets
di: Wang, Yujing, et al.
Pubblicazione: (2025)
di: Wang, Yujing, et al.
Pubblicazione: (2025)
Bridging Textual Profiles and Latent User Embeddings for Personalization
di: Tan, Zhaoxuan, et al.
Pubblicazione: (2026)
di: Tan, Zhaoxuan, et al.
Pubblicazione: (2026)
Documenti analoghi
-
Mitigating the Threshold Priming Effect in Large Language Model-Based Relevance Judgments via Personality Infusing
di: Chen, Nuo, et al.
Pubblicazione: (2025) -
Decoy Effect In Search Interaction: Understanding User Behavior and Measuring System Vulnerability
di: Chen, Nuo, et al.
Pubblicazione: (2024) -
Decoy Effect in Search Interaction: A Pilot Study
di: Chen, Nuo, et al.
Pubblicazione: (2023) -
Do Large Language Models Favor Recent Content? A Study on Recency Bias in LLM-Based Reranking
di: Fang, Hanpei, et al.
Pubblicazione: (2025) -
AI Can Be Cognitively Biased: An Exploratory Study on Threshold Priming in LLM-Based Batch Relevance Assessment
di: Chen, Nuo, et al.
Pubblicazione: (2024)