Graders should cheat: privileged information enables expert-level automated evaluations
Fuente:
arXiv
Salvato in:
| Autori principali: | Zhou, Jin Peng, Arnold, Sébastien M. R., Ding, Nan, Weinberger, Kilian Q., Hua, Nan, Sha, Fei |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
INPROVF: Leveraging Large Language Models to Repair High-level Robot Controllers from Assumption Violations
di: Meng, Qian, et al.
Pubblicazione: (2025)
di: Meng, Qian, et al.
Pubblicazione: (2025)
Correction with Backtracking Reduces Hallucination in Summarization
di: Liu, Zhenzhen, et al.
Pubblicazione: (2023)
di: Liu, Zhenzhen, et al.
Pubblicazione: (2023)
Don't Trust: Verify -- Grounding LLM Quantitative Reasoning with Autoformalization
di: Zhou, Jin Peng, et al.
Pubblicazione: (2024)
di: Zhou, Jin Peng, et al.
Pubblicazione: (2024)
Orchestrating LLMs with Different Personalizations
di: Zhou, Jin Peng, et al.
Pubblicazione: (2024)
di: Zhou, Jin Peng, et al.
Pubblicazione: (2024)
LLM should think and action as a human
di: Leung, Haun, et al.
Pubblicazione: (2025)
di: Leung, Haun, et al.
Pubblicazione: (2025)
On Speeding Up Language Model Evaluation
di: Zhou, Jin Peng, et al.
Pubblicazione: (2024)
di: Zhou, Jin Peng, et al.
Pubblicazione: (2024)
Why should we ever automate moral decision making?
di: Conitzer, Vincent
Pubblicazione: (2024)
di: Conitzer, Vincent
Pubblicazione: (2024)
$Q\sharp$: Provably Optimal Distributional RL for LLM Post-Training
di: Zhou, Jin Peng, et al.
Pubblicazione: (2025)
di: Zhou, Jin Peng, et al.
Pubblicazione: (2025)
Sample-Efficient Diffusion for Text-To-Speech Synthesis
di: Lovelace, Justin, et al.
Pubblicazione: (2024)
di: Lovelace, Justin, et al.
Pubblicazione: (2024)
Re-evaluating the Need for Multimodal Signals in Unsupervised Grammar Induction
di: Li, Boyi, et al.
Pubblicazione: (2022)
di: Li, Boyi, et al.
Pubblicazione: (2022)
Graph Structure Learning with Bi-level Optimization
di: Yin, Nan
Pubblicazione: (2024)
di: Yin, Nan
Pubblicazione: (2024)
Lightweight Relevance Grader in RAG
di: Jeong, Taehee
Pubblicazione: (2025)
di: Jeong, Taehee
Pubblicazione: (2025)
Distributed satellite information networks: Architecture, enabling technologies, and trends
di: Zhang, Qinyu, et al.
Pubblicazione: (2024)
di: Zhang, Qinyu, et al.
Pubblicazione: (2024)
On quantum backpropagation, information reuse, and cheating measurement collapse
di: Abbas, Amira, et al.
Pubblicazione: (2023)
di: Abbas, Amira, et al.
Pubblicazione: (2023)
A Patient-Doctor-NLP-System to contest inequality for less privileged
di: Dikshit, Subrit, et al.
Pubblicazione: (2025)
di: Dikshit, Subrit, et al.
Pubblicazione: (2025)
Language Models are Few-Shot Graders
di: Zhao, Chenyan, et al.
Pubblicazione: (2025)
di: Zhao, Chenyan, et al.
Pubblicazione: (2025)
Large Language Models As MOOCs Graders
di: Golchin, Shahriar, et al.
Pubblicazione: (2024)
di: Golchin, Shahriar, et al.
Pubblicazione: (2024)
Pre-training Limited Memory Language Models with Internal and External Knowledge
di: Zhao, Linxi, et al.
Pubblicazione: (2025)
di: Zhao, Linxi, et al.
Pubblicazione: (2025)
Rethinking LLM Unlearning Objectives: A Gradient Perspective and Go Beyond
di: Wang, Qizhou, et al.
Pubblicazione: (2025)
di: Wang, Qizhou, et al.
Pubblicazione: (2025)
Switchcodec: Adaptive residual-expert sparse quantization for high-fidelity neural audio coding
di: Wang, Xiangbo, et al.
Pubblicazione: (2026)
di: Wang, Xiangbo, et al.
Pubblicazione: (2026)
Scaling physics-informed hard constraints with mixture-of-experts
di: Chalapathi, Nithin, et al.
Pubblicazione: (2024)
di: Chalapathi, Nithin, et al.
Pubblicazione: (2024)
To bribe or to cheat?
di: Ana Carla Bon
Pubblicazione: (2021)
di: Ana Carla Bon
Pubblicazione: (2021)
Are Large Language Models Good Essay Graders?
di: Kundu, Anindita, et al.
Pubblicazione: (2024)
di: Kundu, Anindita, et al.
Pubblicazione: (2024)
Learning to decode logical circuits
di: Zhou, Yiqing, et al.
Pubblicazione: (2025)
di: Zhou, Yiqing, et al.
Pubblicazione: (2025)
Simplex-enabled Safe Continual Learning Machine
di: Cao, Hongpeng, et al.
Pubblicazione: (2024)
di: Cao, Hongpeng, et al.
Pubblicazione: (2024)
A Note on Loss Functions and Error Compounding in Model-based Reinforcement Learning
di: Jiang, Nan
Pubblicazione: (2024)
di: Jiang, Nan
Pubblicazione: (2024)
Selecting Belief-State Approximations in Simulators with Latent States
di: Jiang, Nan
Pubblicazione: (2025)
di: Jiang, Nan
Pubblicazione: (2025)
ChatGPT as a Solver and Grader of Programming Exams written in Spanish
di: Saborido-Fernández, Pablo, et al.
Pubblicazione: (2024)
di: Saborido-Fernández, Pablo, et al.
Pubblicazione: (2024)
Few-Shot Causal Representation Learning for Out-of-Distribution Generalization on Heterogeneous Graphs
di: Ding, Pengfei, et al.
Pubblicazione: (2024)
di: Ding, Pengfei, et al.
Pubblicazione: (2024)
Hidden flaws behind expert-level accuracy of multimodal GPT-4 vision in medicine
di: Jin, Qiao, et al.
Pubblicazione: (2024)
di: Jin, Qiao, et al.
Pubblicazione: (2024)
Unsupervised domain adaptation by learning using privileged information
di: Breitholtz, Adam, et al.
Pubblicazione: (2023)
di: Breitholtz, Adam, et al.
Pubblicazione: (2023)
Large Language Models, scientific knowledge and factuality: A framework to streamline human expert evaluation
di: Wysocka, Magdalena, et al.
Pubblicazione: (2023)
di: Wysocka, Magdalena, et al.
Pubblicazione: (2023)
An AI system to help scientists write expert-level empirical software
di: Aygün, Eser, et al.
Pubblicazione: (2025)
di: Aygün, Eser, et al.
Pubblicazione: (2025)
PhantomWiki: On-Demand Datasets for Reasoning and Retrieval Evaluation
di: Gong, Albert, et al.
Pubblicazione: (2025)
di: Gong, Albert, et al.
Pubblicazione: (2025)
Agentic clinical reasoning over longitudinal myeloma records: a retrospective evaluation against expert consensus
di: Moll, Johannes, et al.
Pubblicazione: (2026)
di: Moll, Johannes, et al.
Pubblicazione: (2026)
Diagnostics of cognitive failures in multi-agent expert systems using dynamic evaluation protocols and subsequent mutation of the processing context
di: Sorstkins, Andrejs, et al.
Pubblicazione: (2025)
di: Sorstkins, Andrejs, et al.
Pubblicazione: (2025)
Biased-Attention Guided Risk Prediction for Safe Decision-Making at Unsignalized Intersections
di: Dong, Chengyang, et al.
Pubblicazione: (2025)
di: Dong, Chengyang, et al.
Pubblicazione: (2025)
Learning from Synthetic Data Improves Multi-hop Reasoning
di: Kabra, Anmol, et al.
Pubblicazione: (2026)
di: Kabra, Anmol, et al.
Pubblicazione: (2026)
RefGrader: Automated Grading of Mathematical Competition Proofs using Agentic Workflows
di: Mahdavi, Hamed, et al.
Pubblicazione: (2025)
di: Mahdavi, Hamed, et al.
Pubblicazione: (2025)
Learning using privileged information for segmenting tumors on digital mammograms
di: Tzortzis, Ioannis N., et al.
Pubblicazione: (2024)
di: Tzortzis, Ioannis N., et al.
Pubblicazione: (2024)
Documenti analoghi
-
INPROVF: Leveraging Large Language Models to Repair High-level Robot Controllers from Assumption Violations
di: Meng, Qian, et al.
Pubblicazione: (2025) -
Correction with Backtracking Reduces Hallucination in Summarization
di: Liu, Zhenzhen, et al.
Pubblicazione: (2023) -
Don't Trust: Verify -- Grounding LLM Quantitative Reasoning with Autoformalization
di: Zhou, Jin Peng, et al.
Pubblicazione: (2024) -
Orchestrating LLMs with Different Personalizations
di: Zhou, Jin Peng, et al.
Pubblicazione: (2024) -
LLM should think and action as a human
di: Leung, Haun, et al.
Pubblicazione: (2025)