In-Token Rationality Optimization: Towards Accurate and Concise LLM Reasoning via Self-Feedback
Fuente:
arXiv
Salvato in:
| Autori principali: | Zhu, Mingye, Liu, Yi, Fu, Zheren, Wang, Quan, Zhang, Yongdong |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Leveraging Robust Optimization for LLM Alignment under Distribution Shifts
di: Zhu, Mingye, et al.
Pubblicazione: (2025)
di: Zhu, Mingye, et al.
Pubblicazione: (2025)
DACL-RAG: Data Augmentation Strategy with Curriculum Learning for Retrieval-Augmented Generation
di: Wang, Shaohan, et al.
Pubblicazione: (2025)
di: Wang, Shaohan, et al.
Pubblicazione: (2025)
FlipGuard: Defending Preference Alignment against Update Regression with Constrained Optimization
di: Zhu, Mingye, et al.
Pubblicazione: (2024)
di: Zhu, Mingye, et al.
Pubblicazione: (2024)
Leveraging Importance Sampling to Detach Alignment Modules from Large Language Models
di: Liu, Yi, et al.
Pubblicazione: (2025)
di: Liu, Yi, et al.
Pubblicazione: (2025)
SparseRM: A Lightweight Preference Modeling with Sparse Autoencoder
di: Liu, Dengcan, et al.
Pubblicazione: (2025)
di: Liu, Dengcan, et al.
Pubblicazione: (2025)
Concise Reasoning via Reinforcement Learning
di: Fatemi, Mehdi, et al.
Pubblicazione: (2025)
di: Fatemi, Mehdi, et al.
Pubblicazione: (2025)
Towards Concise and Adaptive Thinking in Large Reasoning Models: A Survey
di: Zhu, Jason, et al.
Pubblicazione: (2025)
di: Zhu, Jason, et al.
Pubblicazione: (2025)
Walk Before You Run! Concise LLM Reasoning via Reinforcement Learning
di: Song, Mingyang, et al.
Pubblicazione: (2025)
di: Song, Mingyang, et al.
Pubblicazione: (2025)
Not All Tokens Matter: Towards Efficient LLM Reasoning via Token Significance in Reinforcement Learning
di: Liu, Hanbing, et al.
Pubblicazione: (2025)
di: Liu, Hanbing, et al.
Pubblicazione: (2025)
ConciseHint: Boosting Efficient Reasoning via Continuous Concise Hints during Generation
di: Tang, Siao, et al.
Pubblicazione: (2025)
di: Tang, Siao, et al.
Pubblicazione: (2025)
On-the-fly Preference Alignment via Principle-Guided Decoding
di: Zhu, Mingye, et al.
Pubblicazione: (2025)
di: Zhu, Mingye, et al.
Pubblicazione: (2025)
Self-signals Driven Multi-LLM Debate for Efficient and Accurate Reasoning
di: Chen, Xuhang, et al.
Pubblicazione: (2025)
di: Chen, Xuhang, et al.
Pubblicazione: (2025)
Training LLM-Based Agents with Synthetic Self-Reflected Trajectories and Partial Masking
di: Chen, Yihan, et al.
Pubblicazione: (2025)
di: Chen, Yihan, et al.
Pubblicazione: (2025)
Concise Thoughts: Impact of Output Length on LLM Reasoning and Cost
di: Nayab, Sania, et al.
Pubblicazione: (2024)
di: Nayab, Sania, et al.
Pubblicazione: (2024)
HAPO: Training Language Models to Reason Concisely via History-Aware Policy Optimization
di: Huang, Chengyu, et al.
Pubblicazione: (2025)
di: Huang, Chengyu, et al.
Pubblicazione: (2025)
Robust Reasoning via Dynamic Token Selection for Distribution-Aligned Self-Distillation
di: Zhang, Ruiqi, et al.
Pubblicazione: (2026)
di: Zhang, Ruiqi, et al.
Pubblicazione: (2026)
Learning to Reason via Self-Iterative Process Feedback for Small Language Models
di: Chen, Kaiyuan, et al.
Pubblicazione: (2024)
di: Chen, Kaiyuan, et al.
Pubblicazione: (2024)
SelfBudgeter: Adaptive Token Allocation for Efficient LLM Reasoning
di: Li, Zheng, et al.
Pubblicazione: (2025)
di: Li, Zheng, et al.
Pubblicazione: (2025)
Adaptive Group Policy Optimization: Towards Stable Training and Token-Efficient Reasoning
di: Li, Chen, et al.
Pubblicazione: (2025)
di: Li, Chen, et al.
Pubblicazione: (2025)
Token-Guard: Towards Token-Level Hallucination Control via Self-Checking Decoding
di: Zhu, Yifan, et al.
Pubblicazione: (2026)
di: Zhu, Yifan, et al.
Pubblicazione: (2026)
Zero-Shot Detection of LLM-Generated Text using Token Cohesiveness
di: Ma, Shixuan, et al.
Pubblicazione: (2024)
di: Ma, Shixuan, et al.
Pubblicazione: (2024)
Self-Training Elicits Concise Reasoning in Large Language Models
di: Munkhbat, Tergel, et al.
Pubblicazione: (2025)
di: Munkhbat, Tergel, et al.
Pubblicazione: (2025)
Reasoning in Token Economies: Budget-Aware Evaluation of LLM Reasoning Strategies
di: Wang, Junlin, et al.
Pubblicazione: (2024)
di: Wang, Junlin, et al.
Pubblicazione: (2024)
Enhancing Persona Following at Decoding Time via Dynamic Importance Estimation for Role-Playing Agents
di: Liu, Yuxin, et al.
Pubblicazione: (2026)
di: Liu, Yuxin, et al.
Pubblicazione: (2026)
Steering Large Reasoning Models towards Concise Reasoning via Flow Matching
di: Li, Yawei, et al.
Pubblicazione: (2026)
di: Li, Yawei, et al.
Pubblicazione: (2026)
LIRE: listwise reward enhancement for preference alignment
di: Zhu, Mingye, et al.
Pubblicazione: (2024)
di: Zhu, Mingye, et al.
Pubblicazione: (2024)
Accurate KV Cache Quantization with Outlier Tokens Tracing
di: Su, Yi, et al.
Pubblicazione: (2025)
di: Su, Yi, et al.
Pubblicazione: (2025)
Concise and Organized Perception Facilitates Reasoning in Large Language Models
di: Liu, Junjie, et al.
Pubblicazione: (2023)
di: Liu, Junjie, et al.
Pubblicazione: (2023)
Sample More to Think Less: Group Filtered Policy Optimization for Concise Reasoning
di: Shrivastava, Vaishnavi, et al.
Pubblicazione: (2025)
di: Shrivastava, Vaishnavi, et al.
Pubblicazione: (2025)
Preference Optimization for Reasoning with Pseudo Feedback
di: Jiao, Fangkai, et al.
Pubblicazione: (2024)
di: Jiao, Fangkai, et al.
Pubblicazione: (2024)
HAMburger: Accelerating LLM Inference via Token Smashing
di: Liu, Jingyu, et al.
Pubblicazione: (2025)
di: Liu, Jingyu, et al.
Pubblicazione: (2025)
AERO: Autonomous Evolutionary Reasoning Optimization via Endogenous Dual-Loop Feedback
di: Gao, Zhitao, et al.
Pubblicazione: (2026)
di: Gao, Zhitao, et al.
Pubblicazione: (2026)
Align Documents to Questions: Question-Oriented Document Rewriting for Retrieval-Augmented Generation
di: Li, Jiaang, et al.
Pubblicazione: (2026)
di: Li, Jiaang, et al.
Pubblicazione: (2026)
How Do Answer Tokens Read Reasoning Traces? Self-Reading Patterns in Thinking LLMs for Quantitative Reasoning
di: Chen, Haoyang, et al.
Pubblicazione: (2026)
di: Chen, Haoyang, et al.
Pubblicazione: (2026)
Self-Reflective Planning with Knowledge Graphs: Enhancing LLM Reasoning Reliability for Question Answering
di: Zhu, Jiajun, et al.
Pubblicazione: (2025)
di: Zhu, Jiajun, et al.
Pubblicazione: (2025)
SPA: Achieving Consensus in LLM Alignment via Self-Priority Optimization
di: Huang, Yue, et al.
Pubblicazione: (2025)
di: Huang, Yue, et al.
Pubblicazione: (2025)
EASYTOOL: Enhancing LLM-based Agents with Concise Tool Instruction
di: Yuan, Siyu, et al.
Pubblicazione: (2024)
di: Yuan, Siyu, et al.
Pubblicazione: (2024)
LLMs are Superior Feedback Providers: Bootstrapping Reasoning for Lie Detection with Self-Generated Feedback
di: Banerjee, Tanushree, et al.
Pubblicazione: (2024)
di: Banerjee, Tanushree, et al.
Pubblicazione: (2024)
Alignment-Enhanced Decoding:Defending via Token-Level Adaptive Refining of Probability Distributions
di: Liu, Quan, et al.
Pubblicazione: (2024)
di: Liu, Quan, et al.
Pubblicazione: (2024)
A Study on Leveraging Search and Self-Feedback for Agent Reasoning
di: K, Karthikeyan, et al.
Pubblicazione: (2025)
di: K, Karthikeyan, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Leveraging Robust Optimization for LLM Alignment under Distribution Shifts
di: Zhu, Mingye, et al.
Pubblicazione: (2025) -
DACL-RAG: Data Augmentation Strategy with Curriculum Learning for Retrieval-Augmented Generation
di: Wang, Shaohan, et al.
Pubblicazione: (2025) -
FlipGuard: Defending Preference Alignment against Update Regression with Constrained Optimization
di: Zhu, Mingye, et al.
Pubblicazione: (2024) -
Leveraging Importance Sampling to Detach Alignment Modules from Large Language Models
di: Liu, Yi, et al.
Pubblicazione: (2025) -
SparseRM: A Lightweight Preference Modeling with Sparse Autoencoder
di: Liu, Dengcan, et al.
Pubblicazione: (2025)