Copertina

New Desiderata for Direct Preference Optimization

Fuente: arXiv

Salvato in:

Dettagli Bibliografici
Autori principali:	Hu, Xiangkun, He, Tong, Wipf, David
Natura:	Preprint
Pubblicazione:	2024
Soggetti:	Computation and Language
Accesso online:	Acceder al recurso
Tags:	Aggiungi Tag Nessun Tag, puoi essere il primo ad aggiungerne!!

Documenti analoghi

Explicit Preference Optimization: No Need for an Implicit Reward Model
di: Hu, Xiangkun, et al.
Pubblicazione: (2025)

Desiderata for the Context Use of Question Answering Systems
di: Shaier, Sagi, et al.
Pubblicazione: (2024)

Direct Judgement Preference Optimization
di: Wang, Peifeng, et al.
Pubblicazione: (2024)

BPO: Revisiting Preference Modeling in Direct Preference Optimization
di: Sun, Lin, et al.
Pubblicazione: (2025)

Not All Subjectivity Is the Same! Defining Desiderata for the Evaluation of Subjectivity in NLP
di: Khurana, Urja, et al.
Pubblicazione: (2026)

Molecular Facts: Desiderata for Decontextualization in LLM Fact Verification
di: Gunjal, Anisha, et al.
Pubblicazione: (2024)

On Extending Direct Preference Optimization to Accommodate Ties
di: Chen, Jinghong, et al.
Pubblicazione: (2024)

Token-weighted Direct Preference Optimization with Attention
di: Huang, Chengyu, et al.
Pubblicazione: (2026)

Importance Sampling for Multi-Negative Multimodal Direct Preference Optimization
di: Li, Xintong, et al.
Pubblicazione: (2025)

Length Desensitization in Direct Preference Optimization
di: Liu, Wei, et al.
Pubblicazione: (2024)

Token-level Direct Preference Optimization
di: Zeng, Yongcheng, et al.
Pubblicazione: (2024)

DPO-Shift: Shifting the Distribution of Direct Preference Optimization
di: Yang, Xiliang, et al.
Pubblicazione: (2025)

Ambiguity Awareness Optimization: Towards Semantic Disambiguation for Direct Preference Optimization
di: Li, Jian, et al.
Pubblicazione: (2025)

Filtered Direct Preference Optimization
di: Morimura, Tetsuro, et al.
Pubblicazione: (2024)

Direct Preference Optimization with an Offset
di: Amini, Afra, et al.
Pubblicazione: (2024)

Eliminating Biased Length Reliance of Direct Preference Optimization via Down-Sampled KL Divergence
di: Lu, Junru, et al.
Pubblicazione: (2024)

On the Limited Generalization Capability of the Implicit Reward Model Induced by Direct Preference Optimization
di: Lin, Yong, et al.
Pubblicazione: (2024)

Bridging and Modeling Correlations in Pairwise Data for Direct Preference Optimization
di: Jiang, Yuxin, et al.
Pubblicazione: (2024)

PHOENIX: Open-Source Language Adaption for Direct Preference Optimization
di: Uhlig, Matthias, et al.
Pubblicazione: (2024)

Backtranslation Augmented Direct Preference Optimization for Neural Machine Translation
di: Ghassabi, Mehrdad, et al.
Pubblicazione: (2026)

DGPO: Beyond Pairwise Preferences with Directional Consistent Groupwise Optimization
di: Deng, Mengyi, et al.
Pubblicazione: (2026)

Understanding Reference Policies in Direct Preference Optimization
di: Liu, Yixin, et al.
Pubblicazione: (2024)

Accelerating Direct Preference Optimization with Prefix Sharing
di: Wang, Franklin, et al.
Pubblicazione: (2024)

Beyond Hallucinations: Enhancing LVLMs through Hallucination-Aware Direct Preference Optimization
di: Zhao, Zhiyuan, et al.
Pubblicazione: (2023)

Entropy Controllable Direct Preference Optimization
di: Omura, Motoki, et al.
Pubblicazione: (2024)

Orthogonal Finetuning for Direct Preference Optimization
di: Yang, Chenxu, et al.
Pubblicazione: (2024)

Direct Preference Optimization for English-Mandarin Code-Switching Speech Recognition in Audio LLMs
di: Quang, Trung Nguyen, et al.
Pubblicazione: (2026)

Is On-Policy Data always the Best Choice for Direct Preference Optimization-based LM Alignment?
di: Sun, Zetian, et al.
Pubblicazione: (2025)

Self-Training with Direct Preference Optimization Improves Chain-of-Thought Reasoning
di: Wang, Tianduo, et al.
Pubblicazione: (2024)

GroupDPO: Memory efficient Group-wise Direct Preference Optimization
di: Leng, Jixuan, et al.
Pubblicazione: (2026)

No Preference Left Behind: Group Distributional Preference Optimization
di: Yao, Binwei, et al.
Pubblicazione: (2024)

AlphaDPO: Adaptive Reward Margin for Direct Preference Optimization
di: Wu, Junkang, et al.
Pubblicazione: (2024)

Direct Multi-Turn Preference Optimization for Language Agents
di: Shi, Wentao, et al.
Pubblicazione: (2024)

The Crucial Role of Samplers in Online Direct Preference Optimization
di: Shi, Ruizhe, et al.
Pubblicazione: (2024)

Disentangling Length from Quality in Direct Preference Optimization
di: Park, Ryan, et al.
Pubblicazione: (2024)

FedPDPO: Federated Personalized Direct Preference Optimization for Large Language Model Alignment
di: Zhu, Kewen, et al.
Pubblicazione: (2026)

2D-DPO: Scaling Direct Preference Optimization with 2-Dimensional Supervision
di: Li, Shilong, et al.
Pubblicazione: (2024)

FocalPO: Enhancing Preference Optimizing by Focusing on Correct Preference Rankings
di: Liu, Tong, et al.
Pubblicazione: (2025)

BiasDPO: Mitigating Bias in Language Models through Direct Preference Optimization
di: Allam, Ahmed
Pubblicazione: (2024)

Direct Preference Optimization for Neural Machine Translation with Minimum Bayes Risk Decoding
di: Yang, Guangyu, et al.
Pubblicazione: (2023)