Large Language Model Agent Personality and Response Appropriateness: Evaluation by Human Linguistic Experts, LLM-as-Judge, and Natural Language Processing Model
Fuente:
arXiv
Salvato in:
| Autori principali: | Jayakumar, Eswari, Dash, Niladri Sekhar, Mukherjee, Debasmita |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
To Rely or Not to Rely? Evaluating Interventions for Appropriate Reliance on Large Language Models
di: Bo, Jessica Y., et al.
Pubblicazione: (2024)
di: Bo, Jessica Y., et al.
Pubblicazione: (2024)
Limitations of the LLM-as-a-Judge Approach for Evaluating LLM Outputs in Expert Knowledge Tasks
di: Szymanski, Annalisa, et al.
Pubblicazione: (2024)
di: Szymanski, Annalisa, et al.
Pubblicazione: (2024)
PhysioLLM: Supporting Personalized Health Insights with Wearables and Large Language Models
di: Fang, Cathy Mengying, et al.
Pubblicazione: (2024)
di: Fang, Cathy Mengying, et al.
Pubblicazione: (2024)
Subjective Code Preferences in Experts and Large Language Models
di: Mokhova, Anna, et al.
Pubblicazione: (2026)
di: Mokhova, Anna, et al.
Pubblicazione: (2026)
LLM-for-X: Application-agnostic Integration of Large Language Models to Support Personal Writing Workflows
di: Teufelberger, Lukas, et al.
Pubblicazione: (2024)
di: Teufelberger, Lukas, et al.
Pubblicazione: (2024)
When Large Language Models are Reliable for Judging Empathic Communication
di: Kumar, Aakriti, et al.
Pubblicazione: (2025)
di: Kumar, Aakriti, et al.
Pubblicazione: (2025)
Appropriateness of LLM-equipped Robotic Well-being Coach Language in the Workplace: A Qualitative Evaluation
di: Spitale, Micol, et al.
Pubblicazione: (2024)
di: Spitale, Micol, et al.
Pubblicazione: (2024)
Fostering Appropriate Reliance on Large Language Models: The Role of Explanations, Sources, and Inconsistencies
di: Kim, Sunnie S. Y., et al.
Pubblicazione: (2025)
di: Kim, Sunnie S. Y., et al.
Pubblicazione: (2025)
Understanding Large-Language Model (LLM)-powered Human-Robot Interaction
di: Kim, Callie Y., et al.
Pubblicazione: (2024)
di: Kim, Callie Y., et al.
Pubblicazione: (2024)
An Expert Schema for Evaluating Large Language Model Errors in Scholarly Question-Answering Systems
di: Martin-Boyle, Anna, et al.
Pubblicazione: (2026)
di: Martin-Boyle, Anna, et al.
Pubblicazione: (2026)
Natural Language Dataset Generation Framework for Visualizations Powered by Large Language Models
di: Ko, Hyung-Kwon, et al.
Pubblicazione: (2023)
di: Ko, Hyung-Kwon, et al.
Pubblicazione: (2023)
Visualization Generation with Large Language Models: An Evaluation
di: Wang, Xinyu, et al.
Pubblicazione: (2024)
di: Wang, Xinyu, et al.
Pubblicazione: (2024)
Harmony: A Human-Aware, Responsive, Modular Assistant with a Locally Deployed Large Language Model
di: Yin, Ziqi, et al.
Pubblicazione: (2024)
di: Yin, Ziqi, et al.
Pubblicazione: (2024)
Large Language Model-based Human-Agent Collaboration for Complex Task Solving
di: Feng, Xueyang, et al.
Pubblicazione: (2024)
di: Feng, Xueyang, et al.
Pubblicazione: (2024)
Are Humans as Brittle as Large Language Models?
di: Li, Jiahui, et al.
Pubblicazione: (2025)
di: Li, Jiahui, et al.
Pubblicazione: (2025)
Evaluation of Large Language Model-Driven AutoML in Data and Model Management from Human-Centered Perspective
di: Yao, Jiapeng, et al.
Pubblicazione: (2025)
di: Yao, Jiapeng, et al.
Pubblicazione: (2025)
Leveraging Large Language Models to Enhance Domain Expert Inclusion in Data Science Workflows
di: Shih, Jasmine Y., et al.
Pubblicazione: (2024)
di: Shih, Jasmine Y., et al.
Pubblicazione: (2024)
Task Supportive and Personalized Human-Large Language Model Interaction: A User Study
di: Wang, Ben, et al.
Pubblicazione: (2024)
di: Wang, Ben, et al.
Pubblicazione: (2024)
Human-Centered Design Recommendations for LLM-as-a-Judge
di: Pan, Qian, et al.
Pubblicazione: (2024)
di: Pan, Qian, et al.
Pubblicazione: (2024)
Generating Analytic Specifications for Data Visualization from Natural Language Queries using Large Language Models
di: Sah, Subham, et al.
Pubblicazione: (2024)
di: Sah, Subham, et al.
Pubblicazione: (2024)
Natural Language but Omitted? On the Ineffectiveness of Large Language Models' privacy policy from End-users' Perspective
di: Zhang, Shuning, et al.
Pubblicazione: (2024)
di: Zhang, Shuning, et al.
Pubblicazione: (2024)
Human-Computer Interaction and Visualization in Natural Language Generation Models: Applications, Challenges, and Opportunities
di: Wang, Yunchao, et al.
Pubblicazione: (2024)
di: Wang, Yunchao, et al.
Pubblicazione: (2024)
Abstract Operations Research Modeling Using Natural Language Inputs
di: Li, Junxuan, et al.
Pubblicazione: (2024)
di: Li, Junxuan, et al.
Pubblicazione: (2024)
PersonaLLM: Investigating the Ability of Large Language Models to Express Personality Traits
di: Jiang, Hang, et al.
Pubblicazione: (2023)
di: Jiang, Hang, et al.
Pubblicazione: (2023)
Leveraging Large Language Models for Generating Mobile Sensing Strategies in Human Behavior Modeling
di: Gao, Nan, et al.
Pubblicazione: (2023)
di: Gao, Nan, et al.
Pubblicazione: (2023)
Do Language Model Agents Align with Humans in Rating Visualizations? An Empirical Study
di: Shao, Zekai, et al.
Pubblicazione: (2025)
di: Shao, Zekai, et al.
Pubblicazione: (2025)
GPTutor: Great Personalized Tutor with Large Language Models for Personalized Learning Content Generation
di: Chen, Eason, et al.
Pubblicazione: (2024)
di: Chen, Eason, et al.
Pubblicazione: (2024)
TalkToAgent: A Human-centric Explanation of Reinforcement Learning Agents with Large Language Models
di: Kim, Haechang, et al.
Pubblicazione: (2025)
di: Kim, Haechang, et al.
Pubblicazione: (2025)
Learning in Context: Personalizing Educational Content with Large Language Models to Enhance Student Learning
di: Lim, Joy Jia Yin, et al.
Pubblicazione: (2025)
di: Lim, Joy Jia Yin, et al.
Pubblicazione: (2025)
ChatVis: Large Language Model Agent for Generating Scientific Visualizations
di: Peterka, Tom, et al.
Pubblicazione: (2025)
di: Peterka, Tom, et al.
Pubblicazione: (2025)
Large Language Models Predict Human Well-being -- But Not Equally Everywhere
di: Pataranutaporn, Pat, et al.
Pubblicazione: (2025)
di: Pataranutaporn, Pat, et al.
Pubblicazione: (2025)
Comparing Human Expertise and Large Language Models Embeddings in Content Validity Assessment of Personality Tests
di: Milano, Nicola, et al.
Pubblicazione: (2025)
di: Milano, Nicola, et al.
Pubblicazione: (2025)
Insights from Social Shaping Theory: The Appropriation of Large Language Models in an Undergraduate Programming Course
di: Padiyath, Aadarsh, et al.
Pubblicazione: (2024)
di: Padiyath, Aadarsh, et al.
Pubblicazione: (2024)
If You Had to Pitch Your Ideal Software -- Evaluating Large Language Models to Support User Scenario Writing for User Experience Experts and Laypersons
di: Stadler, Patrick, et al.
Pubblicazione: (2025)
di: Stadler, Patrick, et al.
Pubblicazione: (2025)
Human-AI Alignment of Multimodal Large Language Models with Speech-Language Pathologists in Parent-Child Interactions
di: Shi, Weiyan, et al.
Pubblicazione: (2025)
di: Shi, Weiyan, et al.
Pubblicazione: (2025)
Large Language Models for Virtual Human Gesture Selection
di: Torshizi, Parisa Ghanad, et al.
Pubblicazione: (2025)
di: Torshizi, Parisa Ghanad, et al.
Pubblicazione: (2025)
An Optimized Framework for Processing Large-scale Polysomnographic Data Incorporating Expert Human Oversight
di: Holm, Benedikt, et al.
Pubblicazione: (2024)
di: Holm, Benedikt, et al.
Pubblicazione: (2024)
Can Large Language Model Agents Simulate Human Trust Behavior?
di: Xie, Chengxing, et al.
Pubblicazione: (2024)
di: Xie, Chengxing, et al.
Pubblicazione: (2024)
Large Language Models with Human-In-The-Loop Validation for Systematic Review Data Extraction
di: Schroeder, Noah L., et al.
Pubblicazione: (2025)
di: Schroeder, Noah L., et al.
Pubblicazione: (2025)
EmoPrefer: Can Large Language Models Understand Human Emotion Preferences?
di: Lian, Zheng, et al.
Pubblicazione: (2025)
di: Lian, Zheng, et al.
Pubblicazione: (2025)
Documenti analoghi
-
To Rely or Not to Rely? Evaluating Interventions for Appropriate Reliance on Large Language Models
di: Bo, Jessica Y., et al.
Pubblicazione: (2024) -
Limitations of the LLM-as-a-Judge Approach for Evaluating LLM Outputs in Expert Knowledge Tasks
di: Szymanski, Annalisa, et al.
Pubblicazione: (2024) -
PhysioLLM: Supporting Personalized Health Insights with Wearables and Large Language Models
di: Fang, Cathy Mengying, et al.
Pubblicazione: (2024) -
Subjective Code Preferences in Experts and Large Language Models
di: Mokhova, Anna, et al.
Pubblicazione: (2026) -
LLM-for-X: Application-agnostic Integration of Large Language Models to Support Personal Writing Workflows
di: Teufelberger, Lukas, et al.
Pubblicazione: (2024)