Towards Automatic Evaluation for LLMs' Clinical Capabilities: Metric, Data, and Algorithm
Fuente:
arXiv
Salvato in:
| Autori principali: | Liu, Lei, Yang, Xiaoyan, Li, Fangzhou, Chi, Chenfei, Shen, Yue, Zhang, Shiwei Lyu Ming, Ma, Xiaowei, Lyu, Xiangguo, Ma, Liya, Zhang, Zhiqiang, Xue, Wei, Huang, Yiran, Gu, Jinjie |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
RJUA-QA: A Comprehensive QA Dataset for Urology
di: Lyu, Shiwei, et al.
Pubblicazione: (2023)
di: Lyu, Shiwei, et al.
Pubblicazione: (2023)
RJUA-MedDQA: A Multimodal Benchmark for Medical Document Question Answering and Clinical Reasoning
di: Jin, Congyun, et al.
Pubblicazione: (2024)
di: Jin, Congyun, et al.
Pubblicazione: (2024)
Understanding-in-Generation: Reinforcing Generative Capability of Unified Model via Infusing Understanding into Generation
di: Lyu, Yuanhuiyi, et al.
Pubblicazione: (2025)
di: Lyu, Yuanhuiyi, et al.
Pubblicazione: (2025)
ClinAlign: Scaling Healthcare Alignment from Clinician Preference
di: Lyu, Shiwei, et al.
Pubblicazione: (2026)
di: Lyu, Shiwei, et al.
Pubblicazione: (2026)
Know Your Needs Better: Towards Structured Understanding of Marketer Demands with Analogical Reasoning Augmented LLMs
di: Wang, Junjie, et al.
Pubblicazione: (2024)
di: Wang, Junjie, et al.
Pubblicazione: (2024)
RAG-R1: Incentivizing the Search and Reasoning Capabilities of LLMs through Multi-query Parallelism
di: Tan, Zhiwen, et al.
Pubblicazione: (2025)
di: Tan, Zhiwen, et al.
Pubblicazione: (2025)
KnowAgent: Knowledge-Augmented Planning for LLM-Based Agents
di: Zhu, Yuqi, et al.
Pubblicazione: (2024)
di: Zhu, Yuqi, et al.
Pubblicazione: (2024)
Measuring Code Efficiency Optimization Capabilities with ACEOB
di: Pan, Yue, et al.
Pubblicazione: (2024)
di: Pan, Yue, et al.
Pubblicazione: (2024)
Quorum Sensing Regulates the Growth of Ketogulonicigenium vulgare During the Fermentation Process of Vitamin C
di: Qian Zhang, et al.
Pubblicazione: (2025)
di: Qian Zhang, et al.
Pubblicazione: (2025)
Understanding Hyperbolic Metric Learning through Hard Negative Sampling
di: Yue, Yun, et al.
Pubblicazione: (2024)
di: Yue, Yun, et al.
Pubblicazione: (2024)
Collaborative Performance Prediction for Large Language Models
di: Zhang, Qiyuan, et al.
Pubblicazione: (2024)
di: Zhang, Qiyuan, et al.
Pubblicazione: (2024)
Towards Computational Chinese Paleography
di: Ma, Yiran Rex
Pubblicazione: (2026)
di: Ma, Yiran Rex
Pubblicazione: (2026)
Risk Assessment and Security Analysis of Large Language Models
di: Zhang, Xiaoyan, et al.
Pubblicazione: (2025)
di: Zhang, Xiaoyan, et al.
Pubblicazione: (2025)
When Do LLMs Help With Node Classification? A Comprehensive Analysis
di: Wu, Xixi, et al.
Pubblicazione: (2025)
di: Wu, Xixi, et al.
Pubblicazione: (2025)
Unified Long Video Inpainting and Outpainting via Overlapping High-Order Co-Denoising
di: Lyu, Shuangquan, et al.
Pubblicazione: (2025)
di: Lyu, Shuangquan, et al.
Pubblicazione: (2025)
Glans tunnel‐based reconstruction with skin flap or lip mucosa graft for distal penile urethral strictures
di: Fuhao Ji, et al.
Pubblicazione: (2025)
di: Fuhao Ji, et al.
Pubblicazione: (2025)
Ask, Answer, and Detect: Role-Playing LLMs for Personality Detection with Question-Conditioned Mixture-of-Experts
di: Lyu, Yifan, et al.
Pubblicazione: (2025)
di: Lyu, Yifan, et al.
Pubblicazione: (2025)
Automatic Landmark Detection for Preoperative Planning of High Tibial Osteotomy Using Traditional Feature Extraction and Deep Learning Methods
di: Jiaqi Han, et al.
Pubblicazione: (2024)
di: Jiaqi Han, et al.
Pubblicazione: (2024)
Timing is Everything: Temporal Scaffolding of Semantic Surprise in Humor
di: Ma, Yuxi, et al.
Pubblicazione: (2026)
di: Ma, Yuxi, et al.
Pubblicazione: (2026)
Capturing LLM Capabilities via Evidence-Calibrated Query Clustering
di: Wu, Fangzhou, et al.
Pubblicazione: (2026)
di: Wu, Fangzhou, et al.
Pubblicazione: (2026)
StructEval: Benchmarking LLMs' Capabilities to Generate Structural Outputs
di: Yang, Jialin, et al.
Pubblicazione: (2025)
di: Yang, Jialin, et al.
Pubblicazione: (2025)
Mask-DPO: Generalizable Fine-grained Factuality Alignment of LLMs
di: Gu, Yuzhe, et al.
Pubblicazione: (2025)
di: Gu, Yuzhe, et al.
Pubblicazione: (2025)
IoT-MCP: Bridging LLMs and IoT Systems Through Model Context Protocol
di: Yang, Ningyuan, et al.
Pubblicazione: (2025)
di: Yang, Ningyuan, et al.
Pubblicazione: (2025)
Genetic Algorithm with Innovative Chromosome Patterns in the Breeding Process
di: Lyu, Qingchuan
Pubblicazione: (2025)
di: Lyu, Qingchuan
Pubblicazione: (2025)
A Transferability Metric Using Scene Similarity and Local Map Observation for DRL Navigation
di: Lian, Shiwei, et al.
Pubblicazione: (2023)
di: Lian, Shiwei, et al.
Pubblicazione: (2023)
Preference-based Centrality and Ranking in General Metric Spaces
di: Lyu, Lingfeng, et al.
Pubblicazione: (2026)
di: Lyu, Lingfeng, et al.
Pubblicazione: (2026)
Hierarchical AI Multi-Agent Fundamental Investing: Evidence from China's A-Share Market
di: He, Chujun, et al.
Pubblicazione: (2025)
di: He, Chujun, et al.
Pubblicazione: (2025)
CDEoH: Category-Driven Automatic Algorithm Design With Large Language Models
di: Wang, Yu-Nian, et al.
Pubblicazione: (2026)
di: Wang, Yu-Nian, et al.
Pubblicazione: (2026)
Can LLMs "Reason" in Music? An Evaluation of LLMs' Capability of Music Understanding and Generation
di: Zhou, Ziya, et al.
Pubblicazione: (2024)
di: Zhou, Ziya, et al.
Pubblicazione: (2024)
Search-Based LLMs for Code Optimization
di: Gao, Shuzheng, et al.
Pubblicazione: (2024)
di: Gao, Shuzheng, et al.
Pubblicazione: (2024)
How do Multinationals Impact China's Technology? The Role of Quid Pro Quo Policy and Technology Spillovers
di: Xiao Ma, et al.
Pubblicazione: (2025)
di: Xiao Ma, et al.
Pubblicazione: (2025)
Towards Imperceptible Adversarial Attacks for Time Series Classification with Local Perturbations and Frequency Analysis
di: Gu, Wenwei, et al.
Pubblicazione: (2025)
di: Gu, Wenwei, et al.
Pubblicazione: (2025)
Automatic Organ and Pan-cancer Segmentation in Abdomen CT: the FLARE 2023 Challenge
di: Ma, Jun, et al.
Pubblicazione: (2024)
di: Ma, Jun, et al.
Pubblicazione: (2024)
Stimulating Imagination: Towards General-purpose "Something Something Placement"
di: Wu, Jianyang, et al.
Pubblicazione: (2024)
di: Wu, Jianyang, et al.
Pubblicazione: (2024)
Capability-Aware Heterogeneous Control Barrier Functions for Decentralized Multi-Robot Safe Navigation
di: Kim, Joonkyung, et al.
Pubblicazione: (2026)
di: Kim, Joonkyung, et al.
Pubblicazione: (2026)
Warming-driven rise in soil moisture entropy signals destabilization of the Asian Water Tower
di: Xie, Yiran, et al.
Pubblicazione: (2026)
di: Xie, Yiran, et al.
Pubblicazione: (2026)
Recent Progress in Advanced Conjugated Coordination Polymers for Rechargeable Batteries
di: Hao Gong, et al.
Pubblicazione: (2024)
di: Hao Gong, et al.
Pubblicazione: (2024)
ShredBench: Evaluating the Semantic Reasoning Capabilities of Multimodal LLMs in Document Reconstruction
di: Guo, Zichun, et al.
Pubblicazione: (2026)
di: Guo, Zichun, et al.
Pubblicazione: (2026)
VideoScore: Building Automatic Metrics to Simulate Fine-grained Human Feedback for Video Generation
di: He, Xuan, et al.
Pubblicazione: (2024)
di: He, Xuan, et al.
Pubblicazione: (2024)
On Optimizing Electrode Configuration for Wrist-Worn sEMG-Based Thumb Gesture Recognition
di: Zhong, Wenjuan, et al.
Pubblicazione: (2026)
di: Zhong, Wenjuan, et al.
Pubblicazione: (2026)
Documenti analoghi
-
RJUA-QA: A Comprehensive QA Dataset for Urology
di: Lyu, Shiwei, et al.
Pubblicazione: (2023) -
RJUA-MedDQA: A Multimodal Benchmark for Medical Document Question Answering and Clinical Reasoning
di: Jin, Congyun, et al.
Pubblicazione: (2024) -
Understanding-in-Generation: Reinforcing Generative Capability of Unified Model via Infusing Understanding into Generation
di: Lyu, Yuanhuiyi, et al.
Pubblicazione: (2025) -
ClinAlign: Scaling Healthcare Alignment from Clinician Preference
di: Lyu, Shiwei, et al.
Pubblicazione: (2026) -
Know Your Needs Better: Towards Structured Understanding of Marketer Demands with Analogical Reasoning Augmented LLMs
di: Wang, Junjie, et al.
Pubblicazione: (2024)