Training AI Co-Scientists Using Rubric Rewards
Fuente:
arXiv
Salvato in:
| Autori principali: | Goel, Shashwat, Hazra, Rishi, Jayalath, Dulhan, Willi, Timon, Jain, Parag, Shen, William F., Leontiadis, Ilias, Barbieri, Francesco, Bachrach, Yoram, Geiping, Jonas, Whitehouse, Chenxi |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Rethinking Rubric Generation for Improving LLM Judge and Reward Modeling for Open-ended Tasks
di: Shen, William F., et al.
Pubblicazione: (2026)
di: Shen, William F., et al.
Pubblicazione: (2026)
Balanced Accuracy: The Right Metric for Evaluating LLM Judges -- Explained through Youden's J statistic
di: Collot, Stephane, et al.
Pubblicazione: (2025)
di: Collot, Stephane, et al.
Pubblicazione: (2025)
Compute as Teacher: Turning Inference Compute Into Reference-Free Supervision
di: Jayalath, Dulhan, et al.
Pubblicazione: (2025)
di: Jayalath, Dulhan, et al.
Pubblicazione: (2025)
Scaling Open-Ended Reasoning to Predict the Future
di: Chandak, Nikhil, et al.
Pubblicazione: (2025)
di: Chandak, Nikhil, et al.
Pubblicazione: (2025)
Answer Matching Outperforms Multiple Choice for Language Model Evaluation
di: Chandak, Nikhil, et al.
Pubblicazione: (2025)
di: Chandak, Nikhil, et al.
Pubblicazione: (2025)
Towards Knowledge-Grounded Natural Language Understanding and Generation
di: Whitehouse, Chenxi
Pubblicazione: (2024)
di: Whitehouse, Chenxi
Pubblicazione: (2024)
MEG-XL: Data-Efficient Brain-to-Text via Long-Context Pre-Training
di: Jayalath, Dulhan, et al.
Pubblicazione: (2026)
di: Jayalath, Dulhan, et al.
Pubblicazione: (2026)
FutureSim: Replaying World Events to Evaluate Adaptive Agents
di: Goel, Shashwat, et al.
Pubblicazione: (2026)
di: Goel, Shashwat, et al.
Pubblicazione: (2026)
Pitfalls in Evaluating Language Model Forecasters
di: Paleka, Daniel, et al.
Pubblicazione: (2025)
di: Paleka, Daniel, et al.
Pubblicazione: (2025)
Neural Mean-Field Games: Extending Mean-Field Game Theory with Neural Stochastic Differential Equations
di: Thöni, Anna C. M., et al.
Pubblicazione: (2025)
di: Thöni, Anna C. M., et al.
Pubblicazione: (2025)
APRES: An Agentic Paper Revision and Evaluation System
di: Zhao, Bingchen, et al.
Pubblicazione: (2026)
di: Zhao, Bingchen, et al.
Pubblicazione: (2026)
The Decrypto Benchmark for Multi-Agent Reasoning and Theory of Mind
di: Lupu, Andrei, et al.
Pubblicazione: (2025)
di: Lupu, Andrei, et al.
Pubblicazione: (2025)
Generalising Multi-Agent Cooperation through Task-Agnostic Communication
di: Jayalath, Dulhan, et al.
Pubblicazione: (2024)
di: Jayalath, Dulhan, et al.
Pubblicazione: (2024)
Scaling Small Agents Through Strategy Auctions
di: Alazraki, Lisa, et al.
Pubblicazione: (2026)
di: Alazraki, Lisa, et al.
Pubblicazione: (2026)
AutoRubric: Rubric-Based Generative Rewards for Faithful Multimodal Reasoning
di: Jia, Mengzhao, et al.
Pubblicazione: (2025)
di: Jia, Mengzhao, et al.
Pubblicazione: (2025)
Efficiently Dispatching Flash Attention For Partially Filled Attention Masks
di: Sharma, Agniv, et al.
Pubblicazione: (2024)
di: Sharma, Agniv, et al.
Pubblicazione: (2024)
Structsum Generation for Faster Text Comprehension
di: Jain, Parag, et al.
Pubblicazione: (2024)
di: Jain, Parag, et al.
Pubblicazione: (2024)
OpenRubrics: Towards Scalable Synthetic Rubric Generation for Reward Modeling and LLM Alignment
di: Liu, Tianci, et al.
Pubblicazione: (2025)
di: Liu, Tianci, et al.
Pubblicazione: (2025)
Unlocking Non-Invasive Brain-to-Text
di: Jayalath, Dulhan, et al.
Pubblicazione: (2025)
di: Jayalath, Dulhan, et al.
Pubblicazione: (2025)
Great Models Think Alike and this Undermines AI Oversight
di: Goel, Shashwat, et al.
Pubblicazione: (2025)
di: Goel, Shashwat, et al.
Pubblicazione: (2025)
Integrating Large Language Models with Graph-based Reasoning for Conversational Question Answering
di: Jain, Parag, et al.
Pubblicazione: (2024)
di: Jain, Parag, et al.
Pubblicazione: (2024)
The Illusion of Diminishing Returns: Measuring Long Horizon Execution in LLMs
di: Sinha, Akshit, et al.
Pubblicazione: (2025)
di: Sinha, Akshit, et al.
Pubblicazione: (2025)
RubricEM: Meta-RL with Rubric-guided Policy Decomposition beyond Verifiable Rewards
di: Li, Gaotang, et al.
Pubblicazione: (2026)
di: Li, Gaotang, et al.
Pubblicazione: (2026)
AdaRubric: Task-Adaptive Rubrics for Reliable LLM Agent Evaluation and Reward Learning
di: Ding, Liang
Pubblicazione: (2026)
di: Ding, Liang
Pubblicazione: (2026)
Visual Preference Optimization with Rubric Rewards
di: Yu, Ya-Qi, et al.
Pubblicazione: (2026)
di: Yu, Ya-Qi, et al.
Pubblicazione: (2026)
Reinforcement Learning with Robust Rubric Rewards
di: Yu, Ya-Qi, et al.
Pubblicazione: (2026)
di: Yu, Ya-Qi, et al.
Pubblicazione: (2026)
REvolve: Reward Evolution with Large Language Models using Human Feedback
di: Hazra, Rishi, et al.
Pubblicazione: (2024)
di: Hazra, Rishi, et al.
Pubblicazione: (2024)
Efficient Parallel Samplers for Recurrent-Depth Models and Their Connection to Diffusion Language Models
di: Geiping, Jonas, et al.
Pubblicazione: (2025)
di: Geiping, Jonas, et al.
Pubblicazione: (2025)
Rubrics to Tokens: Bridging Response-level Rubrics and Token-level Rewards in Instruction Following Tasks
di: Xu, Tianze, et al.
Pubblicazione: (2026)
di: Xu, Tianze, et al.
Pubblicazione: (2026)
OmniScientist: Toward a Co-evolving Ecosystem of Human and AI Scientists
di: Shao, Chenyang, et al.
Pubblicazione: (2025)
di: Shao, Chenyang, et al.
Pubblicazione: (2025)
Curing Miracle Steps in LLM Mathematical Reasoning with Rubric Rewards
di: Yuan, Youliang, et al.
Pubblicazione: (2025)
di: Yuan, Youliang, et al.
Pubblicazione: (2025)
Proportional Aggregation of Preferences for Sequential Decision Making
di: Chandak, Nikhil, et al.
Pubblicazione: (2023)
di: Chandak, Nikhil, et al.
Pubblicazione: (2023)
Rubric-Guided Process Reward for Stepwise Model Routing
di: Ye, Shenghao, et al.
Pubblicazione: (2026)
di: Ye, Shenghao, et al.
Pubblicazione: (2026)
A Grading Rubric for AI Safety Frameworks
di: Alaga, Jide, et al.
Pubblicazione: (2024)
di: Alaga, Jide, et al.
Pubblicazione: (2024)
DeltaRubric: Generative Multimodal Reward Modeling via Joint Planning and Verification
di: Liu, Rui, et al.
Pubblicazione: (2026)
di: Liu, Rui, et al.
Pubblicazione: (2026)
Feature Likelihood Divergence: Evaluating the Generalization of Generative Models Using Samples
di: Jiralerspong, Marco, et al.
Pubblicazione: (2023)
di: Jiralerspong, Marco, et al.
Pubblicazione: (2023)
RubricRL: Simple Generalizable Rewards for Text-to-Image Generation
di: Feng, Xuelu, et al.
Pubblicazione: (2025)
di: Feng, Xuelu, et al.
Pubblicazione: (2025)
R3: Robust Rubric-Agnostic Reward Models
di: Anugraha, David, et al.
Pubblicazione: (2025)
di: Anugraha, David, et al.
Pubblicazione: (2025)
Rubrics as Rewards: Reinforcement Learning Beyond Verifiable Domains
di: Gunjal, Anisha, et al.
Pubblicazione: (2025)
di: Gunjal, Anisha, et al.
Pubblicazione: (2025)
Segment-Level Diffusion: A Framework for Controllable Long-Form Generation with Diffusion Language Models
di: Zhu, Xiaochen, et al.
Pubblicazione: (2024)
di: Zhu, Xiaochen, et al.
Pubblicazione: (2024)
Documenti analoghi
-
Rethinking Rubric Generation for Improving LLM Judge and Reward Modeling for Open-ended Tasks
di: Shen, William F., et al.
Pubblicazione: (2026) -
Balanced Accuracy: The Right Metric for Evaluating LLM Judges -- Explained through Youden's J statistic
di: Collot, Stephane, et al.
Pubblicazione: (2025) -
Compute as Teacher: Turning Inference Compute Into Reference-Free Supervision
di: Jayalath, Dulhan, et al.
Pubblicazione: (2025) -
Scaling Open-Ended Reasoning to Predict the Future
di: Chandak, Nikhil, et al.
Pubblicazione: (2025) -
Answer Matching Outperforms Multiple Choice for Language Model Evaluation
di: Chandak, Nikhil, et al.
Pubblicazione: (2025)