MultifacetEval: Multifaceted Evaluation to Probe LLMs in Mastering Medical Knowledge
Fuente:
arXiv
Salvato in:
| Autori principali: | Zhou, Yuxuan, Liu, Xien, Ning, Chen, Wu, Ji |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Enhancing the Medical Context-Awareness Ability of LLMs via Multifaceted Self-Refinement Learning
di: Zhou, Yuxuan, et al.
Pubblicazione: (2025)
di: Zhou, Yuxuan, et al.
Pubblicazione: (2025)
Evaluating LLMs Across Multi-Cognitive Levels: From Medical Knowledge Mastery to Scenario-Based Problem Solving
di: Zhou, Yuxuan, et al.
Pubblicazione: (2025)
di: Zhou, Yuxuan, et al.
Pubblicazione: (2025)
What Matters in Memorizing and Recalling Facts? Multifaceted Benchmarks for Knowledge Probing in Language Models
di: Zhao, Xin, et al.
Pubblicazione: (2024)
di: Zhao, Xin, et al.
Pubblicazione: (2024)
Reliable and diverse evaluation of LLM medical knowledge mastery
di: Zhou, Yuxuan, et al.
Pubblicazione: (2024)
di: Zhou, Yuxuan, et al.
Pubblicazione: (2024)
Are LLMs Effective Negotiators? Systematic Evaluation of the Multifaceted Capabilities of LLMs in Negotiation Dialogues
di: Kwon, Deuksin, et al.
Pubblicazione: (2024)
di: Kwon, Deuksin, et al.
Pubblicazione: (2024)
Secure Multifaceted-RAG for Enterprise: Hybrid Knowledge Retrieval with Security Filtering
di: Byun, Grace, et al.
Pubblicazione: (2025)
di: Byun, Grace, et al.
Pubblicazione: (2025)
Comprehensive Reassessment of Large-Scale Evaluation Outcomes in LLMs: A Multifaceted Statistical Approach
di: Sun, Kun, et al.
Pubblicazione: (2024)
di: Sun, Kun, et al.
Pubblicazione: (2024)
SGSimEval: A Comprehensive Multifaceted and Similarity-Enhanced Benchmark for Automatic Survey Generation Systems
di: Guo, Beichen, et al.
Pubblicazione: (2025)
di: Guo, Beichen, et al.
Pubblicazione: (2025)
Encoding Hierarchical Schema via Concept Flow for Multifaceted Ideology Detection
di: Liu, Songtao, et al.
Pubblicazione: (2024)
di: Liu, Songtao, et al.
Pubblicazione: (2024)
Mitigating Unhelpfulness in Emotional Support Conversations with Multifaceted AI Feedback
di: Wang, Jiashuo, et al.
Pubblicazione: (2024)
di: Wang, Jiashuo, et al.
Pubblicazione: (2024)
Variationist: Exploring Multifaceted Variation and Bias in Written Language Data
di: Ramponi, Alan, et al.
Pubblicazione: (2024)
di: Ramponi, Alan, et al.
Pubblicazione: (2024)
LLM Sensitivity Evaluation Framework for Clinical Diagnosis
di: Yan, Chenwei, et al.
Pubblicazione: (2025)
di: Yan, Chenwei, et al.
Pubblicazione: (2025)
A Multifaceted Analysis of Negative Bias in Large Language Models through the Lens of Parametric Knowledge
di: Song, Jongyoon, et al.
Pubblicazione: (2025)
di: Song, Jongyoon, et al.
Pubblicazione: (2025)
Recite, Reconstruct, Recollect: Memorization in LMs as a Multifaceted Phenomenon
di: Prashanth, USVSN Sai, et al.
Pubblicazione: (2024)
di: Prashanth, USVSN Sai, et al.
Pubblicazione: (2024)
Wide-Horizon Thinking and Simulation-Based Evaluation for Real-World LLM Planning with Multifaceted Constraints
di: Yang, Dongjie, et al.
Pubblicazione: (2025)
di: Yang, Dongjie, et al.
Pubblicazione: (2025)
Enriching the NArabizi Treebank: A Multifaceted Approach to Supporting an Under-Resourced Language
di: Riabi, Arij, et al.
Pubblicazione: (2023)
di: Riabi, Arij, et al.
Pubblicazione: (2023)
MKE-Coder: Multi-Axial Knowledge with Evidence Verification in ICD Coding for Chinese EMRs
di: You, Xinxin, et al.
Pubblicazione: (2025)
di: You, Xinxin, et al.
Pubblicazione: (2025)
Enhancing Academic Paper Recommendations Using Fine-Grained Knowledge Entities and Multifaceted Document Embeddings
di: Xi, Haixu, et al.
Pubblicazione: (2026)
di: Xi, Haixu, et al.
Pubblicazione: (2026)
Advancing Automated Speaking Assessment Leveraging Multifaceted Relevance and Grammar Information
di: Lu, Hao-Chien, et al.
Pubblicazione: (2025)
di: Lu, Hao-Chien, et al.
Pubblicazione: (2025)
Translation of Multifaceted Data without Re-Training of Machine Translation Systems
di: Moon, Hyeonseok, et al.
Pubblicazione: (2024)
di: Moon, Hyeonseok, et al.
Pubblicazione: (2024)
ALICE: A Multifaceted Evaluation Framework of Large Audio-Language Models' In-Context Learning Ability
di: Piao, Yen-Ting, et al.
Pubblicazione: (2026)
di: Piao, Yen-Ting, et al.
Pubblicazione: (2026)
MCM-DPO: Multifaceted Cross-Modal Direct Preference Optimization for Alt-text Generation
di: Fu, Jinlan, et al.
Pubblicazione: (2025)
di: Fu, Jinlan, et al.
Pubblicazione: (2025)
AudioTrust: Benchmarking the Multifaceted Trustworthiness of Audio Large Language Models
di: Li, Kai, et al.
Pubblicazione: (2025)
di: Li, Kai, et al.
Pubblicazione: (2025)
MobA: Multifaceted Memory-Enhanced Adaptive Planning for Efficient Mobile Task Automation
di: Zhu, Zichen, et al.
Pubblicazione: (2024)
di: Zhu, Zichen, et al.
Pubblicazione: (2024)
TP-Eval: Tap Multimodal LLMs' Potential in Evaluation by Customizing Prompts
di: Xie, Yuxuan, et al.
Pubblicazione: (2024)
di: Xie, Yuxuan, et al.
Pubblicazione: (2024)
UltraEval: A Lightweight Platform for Flexible and Comprehensive Evaluation for LLMs
di: He, Chaoqun, et al.
Pubblicazione: (2024)
di: He, Chaoqun, et al.
Pubblicazione: (2024)
CliBench: A Multifaceted and Multigranular Evaluation of Large Language Models for Clinical Decision Making
di: Ma, Mingyu Derek, et al.
Pubblicazione: (2024)
di: Ma, Mingyu Derek, et al.
Pubblicazione: (2024)
AI-generated Text Detection: A Multifaceted Approach to Binary and Multiclass Classification
di: Abburi, Harika, et al.
Pubblicazione: (2025)
di: Abburi, Harika, et al.
Pubblicazione: (2025)
Fusion-Eval: Integrating Assistant Evaluators with LLMs
di: Shu, Lei, et al.
Pubblicazione: (2023)
di: Shu, Lei, et al.
Pubblicazione: (2023)
MediEval: A Unified Medical Benchmark for Patient-Contextual and Knowledge-Grounded Reasoning in LLMs
di: Qu, Zhan, et al.
Pubblicazione: (2025)
di: Qu, Zhan, et al.
Pubblicazione: (2025)
PertEval: Unveiling Real Knowledge Capacity of LLMs with Knowledge-Invariant Perturbations
di: Li, Jiatong, et al.
Pubblicazione: (2024)
di: Li, Jiatong, et al.
Pubblicazione: (2024)
ICPC-Eval: Probing the Frontiers of LLM Reasoning with Competitive Programming Contests
di: Xu, Shiyi, et al.
Pubblicazione: (2025)
di: Xu, Shiyi, et al.
Pubblicazione: (2025)
OneEval: Benchmarking LLM Knowledge-intensive Reasoning over Diverse Knowledge Bases
di: Chen, Yongrui, et al.
Pubblicazione: (2025)
di: Chen, Yongrui, et al.
Pubblicazione: (2025)
EmbodiedEval: Evaluate Multimodal LLMs as Embodied Agents
di: Cheng, Zhili, et al.
Pubblicazione: (2025)
di: Cheng, Zhili, et al.
Pubblicazione: (2025)
MedEthicEval: Evaluating Large Language Models Based on Chinese Medical Ethics
di: Jin, Haoan, et al.
Pubblicazione: (2025)
di: Jin, Haoan, et al.
Pubblicazione: (2025)
Does Mapo Tofu Contain Coffee? Probing LLMs for Food-related Cultural Knowledge
di: Zhou, Li, et al.
Pubblicazione: (2024)
di: Zhou, Li, et al.
Pubblicazione: (2024)
Soda-Eval: Open-Domain Dialogue Evaluation in the age of LLMs
di: Mendonça, John, et al.
Pubblicazione: (2024)
di: Mendonça, John, et al.
Pubblicazione: (2024)
DocMath-Eval: Evaluating Math Reasoning Capabilities of LLMs in Understanding Long and Specialized Documents
di: Zhao, Yilun, et al.
Pubblicazione: (2023)
di: Zhao, Yilun, et al.
Pubblicazione: (2023)
AlphaEval: Evaluating Agents in Production
di: Lu, Pengrui, et al.
Pubblicazione: (2026)
di: Lu, Pengrui, et al.
Pubblicazione: (2026)
CalibraEval: Calibrating Prediction Distribution to Mitigate Selection Bias in LLMs-as-Judges
di: Li, Haitao, et al.
Pubblicazione: (2024)
di: Li, Haitao, et al.
Pubblicazione: (2024)
Documenti analoghi
-
Enhancing the Medical Context-Awareness Ability of LLMs via Multifaceted Self-Refinement Learning
di: Zhou, Yuxuan, et al.
Pubblicazione: (2025) -
Evaluating LLMs Across Multi-Cognitive Levels: From Medical Knowledge Mastery to Scenario-Based Problem Solving
di: Zhou, Yuxuan, et al.
Pubblicazione: (2025) -
What Matters in Memorizing and Recalling Facts? Multifaceted Benchmarks for Knowledge Probing in Language Models
di: Zhao, Xin, et al.
Pubblicazione: (2024) -
Reliable and diverse evaluation of LLM medical knowledge mastery
di: Zhou, Yuxuan, et al.
Pubblicazione: (2024) -
Are LLMs Effective Negotiators? Systematic Evaluation of the Multifaceted Capabilities of LLMs in Negotiation Dialogues
di: Kwon, Deuksin, et al.
Pubblicazione: (2024)