Buchumschlag

Debate, Reflect, and Distill: Multi-Agent Feedback with Tree-Structured Preference Optimization for Efficient Language Model Enhancement

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Zhou, Xiaofeng, Huang, Heyan, Liao, Lizi
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Computation and Language Artificial Intelligence
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Boosting Chart-to-Code Generation in MLLM via Dual Preference-Guided Refinement
von: Zhang, Zhihan, et al.
Veröffentlicht: (2025)

Aligned Multi-View Scripts for Universal Chart-to-Code Generation
von: Zhang, Zhihan, et al.
Veröffentlicht: (2026)

PCQPR: Proactive Conversational Question Planning with Reflection
von: Guo, Shasha, et al.
Veröffentlicht: (2024)

TPO: Aligning Large Language Models with Multi-branch & Multi-step Preference Trees
von: Liao, Weibin, et al.
Veröffentlicht: (2024)

Capturing Nuanced Preferences: Preference-Aligned Distillation for Small Language Models
von: Gu, Yanggan, et al.
Veröffentlicht: (2025)

Preference Packing: Efficient Preference Optimization for Large Language Models
von: Cho, Jaekyung
Veröffentlicht: (2026)

Structured Agent Distillation for Large Language Model
von: Liu, Jun, et al.
Veröffentlicht: (2025)

Less is More: Selective Reflection for Compatible and Efficient Knowledge Distillation in Large Language Models
von: Liu, Lingyuan, et al.
Veröffentlicht: (2025)

SGSH: Stimulate Large Language Models with Skeleton Heuristics for Knowledge Base Question Generation
von: Guo, Shasha, et al.
Veröffentlicht: (2024)

GroupDebate: Enhancing the Efficiency of Multi-Agent Debate Using Group Discussion
von: Liu, Tongxuan, et al.
Veröffentlicht: (2024)

MADIAVE: Multi-Agent Debate for Implicit Attribute Value Extraction
von: Huang, Wei-Chieh, et al.
Veröffentlicht: (2025)

PLaD: Preference-based Large Language Model Distillation with Pseudo-Preference Pairs
von: Zhang, Rongzhi, et al.
Veröffentlicht: (2024)

Model-based Preference Optimization in Abstractive Summarization without Human Feedback
von: Choi, Jaepill, et al.
Veröffentlicht: (2024)

MAD-OPD: Breaking the Ceiling in On-Policy Distillation via Multi-Agent Debate
von: Wang, Jianze, et al.
Veröffentlicht: (2026)

From Correction to Mastery: Reinforced Distillation of Large Language Model Agents
von: Lyu, Yuanjie, et al.
Veröffentlicht: (2025)

Self-supervised Preference Optimization: Enhance Your Language Model with Preference Degree Awareness
von: Li, Jian, et al.
Veröffentlicht: (2024)

Training Agents with Weakly Supervised Feedback from Large Language Models
von: Gong, Dihong, et al.
Veröffentlicht: (2024)

Combating Adversarial Attacks with Multi-Agent Debate
von: Chern, Steffi, et al.
Veröffentlicht: (2024)

Dynamic Role Assignment for Multi-Agent Debate
von: Zhang, Miao, et al.
Veröffentlicht: (2026)

Do Retrieval Augmented Language Models Know When They Don't Know?
von: Zhou, Youchao, et al.
Veröffentlicht: (2025)

PEER: Unified Process-Outcome Reinforcement Learning for Structured Empathetic Reasoning
von: Wang, Yunxiao, et al.
Veröffentlicht: (2025)

A Survey on Neural Question Generation: Methods, Applications, and Prospects
von: Guo, Shasha, et al.
Veröffentlicht: (2024)

Zero-Shot Detection of LLM-Generated Text via Implicit Reward Model
von: Liu, Runheng, et al.
Veröffentlicht: (2026)

Chain-of-Agents: End-to-End Agent Foundation Models via Multi-Agent Distillation and Agentic RL
von: Li, Weizhen, et al.
Veröffentlicht: (2025)

Meta-Reflection: A Feedback-Free Reflection Learning Framework
von: Wang, Yaoke, et al.
Veröffentlicht: (2024)

When to Trust Context: Self-Reflective Debates for Context Reliability
von: Zhou, Zeqi, et al.
Veröffentlicht: (2025)

Chunk-Distilled Language Modeling
von: Li, Yanhong, et al.
Veröffentlicht: (2024)

MACPO: Weak-to-Strong Alignment via Multi-Agent Contrastive Preference Optimization
von: Lyu, Yougang, et al.
Veröffentlicht: (2024)

CriticEval: Evaluating Large Language Model as Critic
von: Lan, Tian, et al.
Veröffentlicht: (2024)

Personalizing LLMs with Binary Feedback: A Preference-Corrected Optimization Framework
von: Ma, Xilai, et al.
Veröffentlicht: (2026)

EmoDistill: Offline Emotion Skill Distillation for Language Model Agents in Adversarial Negotiation
von: Long, Yunbo, et al.
Veröffentlicht: (2026)

S$^2$-MAD: Breaking the Token Barrier to Enhance Multi-Agent Debate Efficiency
von: Zeng, Yuting, et al.
Veröffentlicht: (2025)

Improving Mathematical Reasoning Capabilities of Small Language Models via Feedback-Driven Distillation
von: Zhu, Xunyu, et al.
Veröffentlicht: (2024)

Weights-Rotated Preference Optimization for Large Language Models
von: Yang, Chenxu, et al.
Veröffentlicht: (2025)

SDPO: Segment-Level Direct Preference Optimization for Social Agents
von: Kong, Aobo, et al.
Veröffentlicht: (2025)

SIRAJ: Diverse and Efficient Red-Teaming for LLM Agents via Distilled Structured Reasoning
von: Zhou, Kaiwen, et al.
Veröffentlicht: (2025)

DocMEdit: Towards Document-Level Model Editing
von: Zeng, Li, et al.
Veröffentlicht: (2025)

Tree-of-Debate: Multi-Persona Debate Trees Elicit Critical Thinking for Scientific Comparative Analysis
von: Kargupta, Priyanka, et al.
Veröffentlicht: (2025)

ReFeed: Multi-dimensional Summarization Refinement with Reflective Reasoning on Feedback
von: Yun, Taewon, et al.
Veröffentlicht: (2025)

iMAD: Intelligent Multi-Agent Debate for Efficient and Accurate LLM Inference
von: Fan, Wei, et al.
Veröffentlicht: (2025)