Completing Missing Annotation: Multi-Agent Debate for Accurate and Scalable Relevant Assessment for IR Benchmarks
Fuente:
arXiv
Salvato in:
| Autori principali: | Ban, Minjeong, Choi, Jeonghwan, Min, Hyangsuk, Kim, Nicole Hee-Yeon, Kim, Minseok, Lee, Jae-Gil, Song, Hwanjun |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2026
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Towards a Holistic and Automated Evaluation Framework for Multi-Level Comprehension of LLMs in Book-Length Contexts
di: Deng, Jiaqi, et al.
Pubblicazione: (2025)
di: Deng, Jiaqi, et al.
Pubblicazione: (2025)
Aligning Extraction and Generation for Robust Retrieval-Augmented Generation
di: Song, Hwanjun, et al.
Pubblicazione: (2025)
di: Song, Hwanjun, et al.
Pubblicazione: (2025)
Towards Multi-dimensional Evaluation of LLM Summarization across Domains and Languages
di: Min, Hyangsuk, et al.
Pubblicazione: (2025)
di: Min, Hyangsuk, et al.
Pubblicazione: (2025)
Learning to Verify Summary Facts with Fine-Grained LLM Feedback
di: Oh, Jihwan, et al.
Pubblicazione: (2024)
di: Oh, Jihwan, et al.
Pubblicazione: (2024)
What Makes a Sale? Rethinking End-to-End Seller--Buyer Retail Dynamics with LLM Agents
di: Choi, Jeonghwan, et al.
Pubblicazione: (2026)
di: Choi, Jeonghwan, et al.
Pubblicazione: (2026)
ACE Metric: Advection and Convection Evaluation for Accurate Weather Forecasting
di: Kim, Doyi, et al.
Pubblicazione: (2024)
di: Kim, Doyi, et al.
Pubblicazione: (2024)
Distilling Long-CoT Reasoning through Collaborative Step-wise Multi-Teacher Decoding
di: Yun, Taewon, et al.
Pubblicazione: (2026)
di: Yun, Taewon, et al.
Pubblicazione: (2026)
ReFeed: Multi-dimensional Summarization Refinement with Reflective Reasoning on Feedback
di: Yun, Taewon, et al.
Pubblicazione: (2025)
di: Yun, Taewon, et al.
Pubblicazione: (2025)
Relationship between perceived human resource management system strength, thriving at work, and employee's turnover intention in Chinese hotels
di: Jing Guo, et al.
Pubblicazione: (2024)
di: Jing Guo, et al.
Pubblicazione: (2024)
Bond-Strength-Based Understanding of Oxygen Vacancy Migration Barriers in Rutile Oxides
di: Kim, Inseo, et al.
Pubblicazione: (2026)
di: Kim, Inseo, et al.
Pubblicazione: (2026)
CARBD-Ko: A Contextually Annotated Review Benchmark Dataset for Aspect-Level Sentiment Classification in Korean
di: Jang, Dongjun, et al.
Pubblicazione: (2024)
di: Jang, Dongjun, et al.
Pubblicazione: (2024)
Single-Ferroelectric Memcapacitor-Based Time-Domain Content-Addressable Memory for Highly Precise Distance Function Computation
di: Ryu, Minjeong, et al.
Pubblicazione: (2025)
di: Ryu, Minjeong, et al.
Pubblicazione: (2025)
References Indeed Matter? Reference-Free Preference Optimization for Conversational Query Reformulation
di: Kim, Doyoung, et al.
Pubblicazione: (2025)
di: Kim, Doyoung, et al.
Pubblicazione: (2025)
Increasing the p-Selmer rank by twisting
di: Kim, Minseok
Pubblicazione: (2025)
di: Kim, Minseok
Pubblicazione: (2025)
$p$-twisted Selmer near-companion curves
di: Kim, Minseok
Pubblicazione: (2025)
di: Kim, Minseok
Pubblicazione: (2025)
PMoE: Progressive Mixture of Experts with Asymmetric Transformer for Continual Learning
di: Jung, Min Jae, et al.
Pubblicazione: (2024)
di: Jung, Min Jae, et al.
Pubblicazione: (2024)
Optimization of Chondroitin Sulfate Extraction From Skate ( Raja spp.) Cartilage Using Response Surface Methodology: Anti‐Inflammatory and Chondroprotective Activities
di: Se Yeon Kim, et al.
Pubblicazione: (2026)
di: Se Yeon Kim, et al.
Pubblicazione: (2026)
Finer: Investigating and Enhancing Fine-Grained Visual Concept Recognition in Large Vision Language Models
di: Kim, Jeonghwan, et al.
Pubblicazione: (2024)
di: Kim, Jeonghwan, et al.
Pubblicazione: (2024)
Validity and Reliability of the Korean Version of the Self‐Care Self‐Efficacy Scale for Patients With Heart Failure: A Psychometric Evaluation
di: JinShil Kim, et al.
Pubblicazione: (2025)
di: JinShil Kim, et al.
Pubblicazione: (2025)
NR-Surface: NextG-ready $μ$W-reconfigurable mmWave Metasurface
di: Kim, Minseok, et al.
Pubblicazione: (2024)
di: Kim, Minseok, et al.
Pubblicazione: (2024)
One Size Fits All for Semantic Shifts: Adaptive Prompt Tuning for Continual Learning
di: Kim, Doyoung, et al.
Pubblicazione: (2023)
di: Kim, Doyoung, et al.
Pubblicazione: (2023)
A Dual-Branch Parallel Network for Speech Enhancement and Restoration
di: Yang, Da-Hee, et al.
Pubblicazione: (2024)
di: Yang, Da-Hee, et al.
Pubblicazione: (2024)
Crystallographic defects in Weyl semimetal LaAlGe
di: Kim, Inseo, et al.
Pubblicazione: (2024)
di: Kim, Inseo, et al.
Pubblicazione: (2024)
Chart-to-Experience: Benchmarking Multimodal LLMs for Predicting Experiential Impact of Charts
di: Kim, Seon Gyeom, et al.
Pubblicazione: (2025)
di: Kim, Seon Gyeom, et al.
Pubblicazione: (2025)
Nonlocal Dual-Band Reconfigurable Intelligent Surfaces for Precise Full-Space Beamforming
di: Kim, Moosung, et al.
Pubblicazione: (2026)
di: Kim, Moosung, et al.
Pubblicazione: (2026)
Engineering Spatial Dispersion to Synthesize Arbitrary Spatial Filters Based on Metagratings
di: Kim, Jinyong, et al.
Pubblicazione: (2026)
di: Kim, Jinyong, et al.
Pubblicazione: (2026)
LIBERO-Para: A Diagnostic Benchmark and Metrics for Paraphrase Robustness in VLA Models
di: Kim, Chanyoung, et al.
Pubblicazione: (2026)
di: Kim, Chanyoung, et al.
Pubblicazione: (2026)
Alignment Tuning for Large Language Models: A Data-Centric Lens on Alignment Data Pipelines
di: Song, Hwanjun
Pubblicazione: (2026)
di: Song, Hwanjun
Pubblicazione: (2026)
Aged‐Related Fibroblast Activation Protein Expression in Skeletal Muscles Evaluated by PET Imaging
di: Minseok Suh, et al.
Pubblicazione: (2025)
di: Minseok Suh, et al.
Pubblicazione: (2025)
LLMDR: LLM-Driven Deadlock Detection and Resolution in Multi-Agent Pathfinding
di: Seo, Seungbae, et al.
Pubblicazione: (2025)
di: Seo, Seungbae, et al.
Pubblicazione: (2025)
Efficient Test-Time Optimization for Depth Completion via Low-Rank Decoder Adaptation
di: Seo, Minseok, et al.
Pubblicazione: (2026)
di: Seo, Minseok, et al.
Pubblicazione: (2026)
Becoming “Me” in a Hostile World: Queer, Disability, and Self‐Identification in South Korea
di: Jongbin Kim, et al.
Pubblicazione: (2025)
di: Jongbin Kim, et al.
Pubblicazione: (2025)
Unique ID based Trust Scheme for Improved IoV Wireless Sensor Network Security Against Power Controlled Sybil Attacks
di: Kim, Jae-Dong, et al.
Pubblicazione: (2024)
di: Kim, Jae-Dong, et al.
Pubblicazione: (2024)
Uncovering High-Order Cohesive Structures: Efficient (k,g)-Core Computation and Decomposition for Large Hypergraphs
di: Kim, Dahee, et al.
Pubblicazione: (2025)
di: Kim, Dahee, et al.
Pubblicazione: (2025)
LoTa-Bench: Benchmarking Language-oriented Task Planners for Embodied Agents
di: Choi, Jae-Woo, et al.
Pubblicazione: (2024)
di: Choi, Jae-Woo, et al.
Pubblicazione: (2024)
Retrieve What's Missing: Coverage-Maximizing Retrieval for Consistent Long Video Generation
di: Joo, Minseok, et al.
Pubblicazione: (2026)
di: Joo, Minseok, et al.
Pubblicazione: (2026)
Switch4EAI: Leveraging Console Game Platform for Benchmarking Robotic Athletics
di: Li, Tianyu, et al.
Pubblicazione: (2025)
di: Li, Tianyu, et al.
Pubblicazione: (2025)
Hot Water Extraction of Korean Red Ginseng ( Panax ginseng C.A. Meyer) Using Vacuum‐Gas Substitution Under Oxygen‐Free Conditions: Effect on Ginsenosides and Antioxidant Activity
di: Kyo‐Yeon Lee, et al.
Pubblicazione: (2026)
di: Kyo‐Yeon Lee, et al.
Pubblicazione: (2026)
Data-driven Precipitation Nowcasting Using Satellite Imagery
di: Park, Young-Jae, et al.
Pubblicazione: (2024)
di: Park, Young-Jae, et al.
Pubblicazione: (2024)
Prescription Trends of Initial Pharmacotherapy for Benign Prostatic Hyperplasia Among Treatment‐Naïve Patients in South Korea: A Retrospective Analysis
di: Yeon Hee Kim, et al.
Pubblicazione: (2025)
di: Yeon Hee Kim, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Towards a Holistic and Automated Evaluation Framework for Multi-Level Comprehension of LLMs in Book-Length Contexts
di: Deng, Jiaqi, et al.
Pubblicazione: (2025) -
Aligning Extraction and Generation for Robust Retrieval-Augmented Generation
di: Song, Hwanjun, et al.
Pubblicazione: (2025) -
Towards Multi-dimensional Evaluation of LLM Summarization across Domains and Languages
di: Min, Hyangsuk, et al.
Pubblicazione: (2025) -
Learning to Verify Summary Facts with Fine-Grained LLM Feedback
di: Oh, Jihwan, et al.
Pubblicazione: (2024) -
What Makes a Sale? Rethinking End-to-End Seller--Buyer Retail Dynamics with LLM Agents
di: Choi, Jeonghwan, et al.
Pubblicazione: (2026)