Buchumschlag

Enhancing the Preference Extractor in Multi-turn Dialogues: From Annotating Disasters to Accurate Preference Extraction

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Wang, Cheng, Liu, ziru, Tang, Pengcheng, Zhang, Mingyu, Dai, Quanyu, Zhu, Yue
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Computation and Language
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Expectation Confirmation Preference Optimization for Multi-Turn Conversational Recommendation Agent
von: Feng, Xueyang, et al.
Veröffentlicht: (2025)

Exploring LLM-based Data Annotation Strategies for Medical Dialogue Preference Alignment
von: Dou, Chengfeng, et al.
Veröffentlicht: (2024)

How Does Personalized Memory Shape LLM Behavior? Benchmarking Rational Preference Utilization in Personalized Assistants
von: Feng, Xueyang, et al.
Veröffentlicht: (2026)

Enhancing Multimodal LLM for Detailed and Accurate Video Captioning using Multi-Round Preference Optimization
von: Tang, Changli, et al.
Veröffentlicht: (2024)

MARE: Multi-Aspect Rationale Extractor on Unsupervised Rationale Extraction
von: Jiang, Han, et al.
Veröffentlicht: (2024)

EduDial: Constructing a Large-scale Multi-turn Teacher-Student Dialogue Corpus
von: Wei, Shouang, et al.
Veröffentlicht: (2025)

Evaluating & Reducing Deceptive Dialogue From Language Models with Multi-turn RL
von: Abdulhai, Marwa, et al.
Veröffentlicht: (2025)

Data Selection for Multi-turn Dialogue Instruction Tuning
von: Li, Bo, et al.
Veröffentlicht: (2026)

Enhancing the Reasoning Ability of Multimodal Large Language Models via Mixed Preference Optimization
von: Wang, Weiyun, et al.
Veröffentlicht: (2024)

Improving Multi-turn Dialogue Consistency with Self-Recall Thinking
von: Pang, Renning, et al.
Veröffentlicht: (2026)

Measuring Sycophancy of Language Models in Multi-turn Dialogues
von: Hong, Jiseung, et al.
Veröffentlicht: (2025)

Dialogue-Based Multi-Dimensional Relationship Extraction from Novels
von: Yan, Yuchen, et al.
Veröffentlicht: (2025)

MemeCMD: An Automatically Generated Chinese Multi-turn Dialogue Dataset with Contextually Retrieved Memes
von: Wang, Yuheng, et al.
Veröffentlicht: (2025)

Not All Preference Pairs Are Created Equal: A Recipe for Annotation-Efficient Iterative Preference Learning
von: Yang, Sen, et al.
Veröffentlicht: (2024)

AIR: A Systematic Analysis of Annotations, Instructions, and Response Pairs in Preference Dataset
von: He, Bingxiang, et al.
Veröffentlicht: (2025)

FairMT-Bench: Benchmarking Fairness for Multi-turn Dialogue in Conversational LLMs
von: Fan, Zhiting, et al.
Veröffentlicht: (2024)

Beyond Overlap Metrics: Rewarding Reasoning and Preferences for Faithful Multi-Role Dialogue Summarization
von: Mei, Xiaoyong, et al.
Veröffentlicht: (2026)

Spread Preference Annotation: Direct Preference Judgment for Efficient LLM Alignment
von: Kim, Dongyoung, et al.
Veröffentlicht: (2024)

Diverging Preferences: When do Annotators Disagree and do Models Know?
von: Zhang, Michael JQ, et al.
Veröffentlicht: (2024)

AlpsBench: An LLM Personalization Benchmark for Real-Dialogue Memorization and Preference Alignment
von: Xiao, Jianfei, et al.
Veröffentlicht: (2026)

Crisp: Cognitive Restructuring of Negative Thoughts through Multi-turn Supportive Dialogues
von: Zhou, Jinfeng, et al.
Veröffentlicht: (2025)

LLM-Driven Preference Data Synthesis for Proactive Prediction of the Next User Utterance in Human-Machine Dialogue
von: Wang, Jinqiang, et al.
Veröffentlicht: (2025)

Nash CoT: Multi-Path Inference with Preference Equilibrium
von: Zhang, Ziqi, et al.
Veröffentlicht: (2024)

On the Role of Preference Variance in Preference Optimization
von: Guo, Jiacheng, et al.
Veröffentlicht: (2025)

A State-Update Prompting Strategy for Efficient and Robust Multi-turn Dialogue
von: Liu, Ziyi
Veröffentlicht: (2025)

FocalPO: Enhancing Preference Optimizing by Focusing on Correct Preference Rankings
von: Liu, Tong, et al.
Veröffentlicht: (2025)

Tokenization Preference for Human and Machine Learning Model: An Annotation Study
von: Hiraoka, Tatsuya, et al.
Veröffentlicht: (2023)

LRHP: Learning Representations for Human Preferences via Preference Pairs
von: Wang, Chenglong, et al.
Veröffentlicht: (2024)

PLOT: Enhancing Preference Learning via Optimal Transport
von: Zhu, Liang, et al.
Veröffentlicht: (2026)

Preference Optimization with Multi-Sample Comparisons
von: Wang, Chaoqi, et al.
Veröffentlicht: (2024)

ReSURE: Regularizing Supervision Unreliability for Multi-turn Dialogue Fine-tuning
von: Du, Yiming, et al.
Veröffentlicht: (2025)

Style Transfer with Multi-iteration Preference Optimization
von: Liu, Shuai, et al.
Veröffentlicht: (2024)

Steering Dialogue Dynamics for Robustness against Multi-turn Jailbreaking Attacks
von: Hu, Hanjiang, et al.
Veröffentlicht: (2025)

BPO: Revisiting Preference Modeling in Direct Preference Optimization
von: Sun, Lin, et al.
Veröffentlicht: (2025)

SafeMT: Multi-turn Safety for Multimodal Language Models
von: Zhu, Han, et al.
Veröffentlicht: (2025)

NaturalConv: A Chinese Dialogue Dataset Towards Multi-turn Topic-driven Conversation
von: Wang, Xiaoyang, et al.
Veröffentlicht: (2021)

A Survey on Recent Advances in LLM-Based Multi-turn Dialogue Systems
von: Yi, Zihao, et al.
Veröffentlicht: (2024)

Self-supervised Preference Optimization: Enhance Your Language Model with Preference Degree Awareness
von: Li, Jian, et al.
Veröffentlicht: (2024)

Multi-Domain Explainability of Preferences
von: Calderon, Nitay, et al.
Veröffentlicht: (2025)

Pruning as a Domain-specific LLM Extractor
von: Zhang, Nan, et al.
Veröffentlicht: (2024)