CoPRIS: Efficient and Stable Reinforcement Learning via Concurrency-Controlled Partial Rollout with Importance Sampling
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Qu, Zekai, Pan, Yinxu, Sun, Ao, Xiao, Chaojun, Han, Xu |
|---|---|
| Format: | Preprint |
| Publié: |
2025
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
Not All Rollouts are Useful: Down-Sampling Rollouts in LLM Reinforcement Learning
par: Xu, Yixuan Even, et autres
Publié: (2025)
par: Xu, Yixuan Even, et autres
Publié: (2025)
APRIL: Active Partial Rollouts in Reinforcement Learning to Tame Long-tail Generation
par: Zhou, Yuzhen, et autres
Publié: (2025)
par: Zhou, Yuzhen, et autres
Publié: (2025)
Partial Domain Adaptation via Importance Sampling-based Shift Correction
par: Guo, Cheng-Jun, et autres
Publié: (2025)
par: Guo, Cheng-Jun, et autres
Publié: (2025)
EchoRL: Reinforcement Learning via Rollout Echoing
par: Bi, Jinhe, et autres
Publié: (2026)
par: Bi, Jinhe, et autres
Publié: (2026)
Sparse-RL: Breaking the Memory Wall in LLM Reinforcement Learning via Stable Sparse Rollouts
par: Luo, Sijia, et autres
Publié: (2026)
par: Luo, Sijia, et autres
Publié: (2026)
Guided Cooperation in Hierarchical Reinforcement Learning via Model-based Rollout
par: Wang, Haoran, et autres
Publié: (2023)
par: Wang, Haoran, et autres
Publié: (2023)
RoRecomp: Enhancing Reasoning Efficiency via Rollout Response Recomposition in Reinforcement Learning
par: Li, Gang, et autres
Publié: (2025)
par: Li, Gang, et autres
Publié: (2025)
Train Less, Learn More: Adaptive Efficient Rollout Optimization for Group-Based Reinforcement Learning
par: Zhang, Zhi, et autres
Publié: (2026)
par: Zhang, Zhi, et autres
Publié: (2026)
Act Only When It Pays: Efficient Reinforcement Learning for LLM Reasoning via Selective Rollouts
par: Zheng, Haizhong, et autres
Publié: (2025)
par: Zheng, Haizhong, et autres
Publié: (2025)
Portfolio Reinforcement Learning with Scenario-Context Rollout
par: Bendatu, Vanya Priscillia, et autres
Publié: (2026)
par: Bendatu, Vanya Priscillia, et autres
Publié: (2026)
SPEC-RL: Accelerating On-Policy Reinforcement Learning with Speculative Rollouts
par: Liu, Bingshuai, et autres
Publié: (2025)
par: Liu, Bingshuai, et autres
Publié: (2025)
FP4 Explore, BF16 Train: Diffusion Reinforcement Learning via Efficient Rollout Scaling
par: Li, Yitong, et autres
Publié: (2026)
par: Li, Yitong, et autres
Publié: (2026)
Superior Computer Chess with Model Predictive Control, Reinforcement Learning, and Rollout
par: Gundawar, Atharva, et autres
Publié: (2024)
par: Gundawar, Atharva, et autres
Publié: (2024)
More Efficient Randomized Exploration for Reinforcement Learning via Approximate Sampling
par: Ishfaq, Haque, et autres
Publié: (2024)
par: Ishfaq, Haque, et autres
Publié: (2024)
Stable and Efficient Single-Rollout RL for Multimodal Reasoning
par: Liu, Rui, et autres
Publié: (2025)
par: Liu, Rui, et autres
Publié: (2025)
Contextual Rollout Bandits for Reinforcement Learning with Verifiable Rewards
par: Lu, Xiaodong, et autres
Publié: (2026)
par: Lu, Xiaodong, et autres
Publié: (2026)
SrSv: Integrating Sequential Rollouts with Sequential Value Estimation for Multi-agent Reinforcement Learning
par: Wan, Xu, et autres
Publié: (2025)
par: Wan, Xu, et autres
Publié: (2025)
KARL: Mitigating Hallucinations in LLMs via Knowledge-Boundary-Aware Reinforcement Learning
par: Gao, Cheng, et autres
Publié: (2026)
par: Gao, Cheng, et autres
Publié: (2026)
Provable Representation with Efficient Planning for Partial Observable Reinforcement Learning
par: Zhang, Hongming, et autres
Publié: (2023)
par: Zhang, Hongming, et autres
Publié: (2023)
Nested-ReFT: Efficient Reinforcement Learning for Large Language Model Fine-Tuning via Off-Policy Rollouts
par: Heuillet, Maxime, et autres
Publié: (2025)
par: Heuillet, Maxime, et autres
Publié: (2025)
CuSearch: Curriculum Rollout Sampling via Search Depth for Agentic RAG
par: Shen, Jianghan, et autres
Publié: (2026)
par: Shen, Jianghan, et autres
Publié: (2026)
Reinforcement Learning for Control with Probabilistic Stability Guarantee: A Finite-Sample Approach
par: Han, Minghao, et autres
Publié: (2026)
par: Han, Minghao, et autres
Publié: (2026)
Adaptive Rollout Allocation for Online Reinforcement Learning with Verifiable Rewards
par: Nguyen, Hieu Trung, et autres
Publié: (2026)
par: Nguyen, Hieu Trung, et autres
Publié: (2026)
PyBench: Evaluating LLM Agent on various real-world coding tasks
par: Zhang, Yaolun, et autres
Publié: (2024)
par: Zhang, Yaolun, et autres
Publié: (2024)
BQSched: A Non-intrusive Scheduler for Batch Concurrent Queries via Reinforcement Learning
par: Xu, Chenhao, et autres
Publié: (2025)
par: Xu, Chenhao, et autres
Publié: (2025)
The Elephant in the Room: Rethinking the Usage of Pre-trained Language Model in Sequential Recommendation
par: Qu, Zekai, et autres
Publié: (2024)
par: Qu, Zekai, et autres
Publié: (2024)
InfLLM: Training-Free Long-Context Extrapolation for LLMs with an Efficient Context Memory
par: Xiao, Chaojun, et autres
Publié: (2024)
par: Xiao, Chaojun, et autres
Publié: (2024)
Improving Execution Concurrency in Partial-Order Plans via Block-Substitution
par: Noor, Sabah Binte, et autres
Publié: (2024)
par: Noor, Sabah Binte, et autres
Publié: (2024)
Embedding Domain Knowledge for Large Language Models via Reinforcement Learning from Augmented Generation
par: Nie, Chaojun, et autres
Publié: (2025)
par: Nie, Chaojun, et autres
Publié: (2025)
LISA: Layerwise Importance Sampling for Memory-Efficient Large Language Model Fine-Tuning
par: Pan, Rui, et autres
Publié: (2024)
par: Pan, Rui, et autres
Publié: (2024)
BubbleSpec: Turning Long-Tail Bubbles into Speculative Rollout Drafts for Synchronous Reinforcement Learning
par: Xu, Yuhang, et autres
Publié: (2026)
par: Xu, Yuhang, et autres
Publié: (2026)
Relative Importance Sampling for off-Policy Actor-Critic in Deep Reinforcement Learning
par: Humayoo, Mahammad, et autres
Publié: (2018)
par: Humayoo, Mahammad, et autres
Publié: (2018)
Learning Rollout from Sampling:An R1-Style Tokenized Traffic Simulation Model
par: Wang, Ziyan, et autres
Publié: (2026)
par: Wang, Ziyan, et autres
Publié: (2026)
APB-V: Accelerating Long-Video Understanding via Sequence-Parallelism-aware Approximate Attention
par: Huang, Yuxiang, et autres
Publié: (2026)
par: Huang, Yuxiang, et autres
Publié: (2026)
Multiple Unmanned Aerial Vehicle Formation Control through Deep Reinforcement Learning with Offline Sample Correction
par: Zhongkai Chen, et autres
Publié: (2025)
par: Zhongkai Chen, et autres
Publié: (2025)
RTMC: Step-Level Credit Assignment via Rollout Trees
par: Wang, Tao, et autres
Publié: (2026)
par: Wang, Tao, et autres
Publié: (2026)
Knowledgeable Agents by Offline Reinforcement Learning from Large Language Model Rollouts
par: Pang, Jing-Cheng, et autres
Publié: (2024)
par: Pang, Jing-Cheng, et autres
Publié: (2024)
Stable Reinforcement Learning for Efficient Reasoning
par: Dai, Muzhi, et autres
Publié: (2025)
par: Dai, Muzhi, et autres
Publié: (2025)
DARTS: Distribution-Aware Active Rollout Trajectory Shaping for Accelerating LLM Reinforcement Learning
par: Wang, Yujie, et autres
Publié: (2026)
par: Wang, Yujie, et autres
Publié: (2026)
SceneDiffuser: Efficient and Controllable Driving Simulation Initialization and Rollout
par: Jiang, Chiyu Max, et autres
Publié: (2024)
par: Jiang, Chiyu Max, et autres
Publié: (2024)
Documents similaires
-
Not All Rollouts are Useful: Down-Sampling Rollouts in LLM Reinforcement Learning
par: Xu, Yixuan Even, et autres
Publié: (2025) -
APRIL: Active Partial Rollouts in Reinforcement Learning to Tame Long-tail Generation
par: Zhou, Yuzhen, et autres
Publié: (2025) -
Partial Domain Adaptation via Importance Sampling-based Shift Correction
par: Guo, Cheng-Jun, et autres
Publié: (2025) -
EchoRL: Reinforcement Learning via Rollout Echoing
par: Bi, Jinhe, et autres
Publié: (2026) -
Sparse-RL: Breaking the Memory Wall in LLM Reinforcement Learning via Stable Sparse Rollouts
par: Luo, Sijia, et autres
Publié: (2026)