Reviewing the Reviewer: Elevating Peer Review Quality through LLM-Guided Feedback
Fuente:
arXiv
Salvato in:
| Autori principali: | Purkayastha, Sukannya, Wan, Qile, Lauscher, Anne, Qu, Lizhen, Gurevych, Iryna |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2026
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
LazyReview A Dataset for Uncovering Lazy Thinking in NLP Peer Reviews
di: Purkayastha, Sukannya, et al.
Pubblicazione: (2025)
di: Purkayastha, Sukannya, et al.
Pubblicazione: (2025)
Decision-Making with Deliberation: Meta-reviewing as a Document-grounded Dialogue
di: Purkayastha, Sukannya, et al.
Pubblicazione: (2025)
di: Purkayastha, Sukannya, et al.
Pubblicazione: (2025)
Commitment Checklist: Auditing Author Commitments in Peer Review
di: Chen, Chung-Chi, et al.
Pubblicazione: (2026)
di: Chen, Chung-Chi, et al.
Pubblicazione: (2026)
The Good, the Bad and the Constructive: Automatically Measuring Peer Review's Utility for Authors
di: Sadallah, Abdelrahman, et al.
Pubblicazione: (2025)
di: Sadallah, Abdelrahman, et al.
Pubblicazione: (2025)
Is Peer Review Really in Decline? Analyzing Review Quality across Venues and Time
di: Kuznetsov, Ilia, et al.
Pubblicazione: (2026)
di: Kuznetsov, Ilia, et al.
Pubblicazione: (2026)
Identifying Aspects in Peer Reviews
di: Lu, Sheng, et al.
Pubblicazione: (2025)
di: Lu, Sheng, et al.
Pubblicazione: (2025)
PeerQA: A Scientific Question Answering Dataset from Peer Reviews
di: Baumgärtner, Tim, et al.
Pubblicazione: (2025)
di: Baumgärtner, Tim, et al.
Pubblicazione: (2025)
The Lou Dataset -- Exploring the Impact of Gender-Fair Language in German Text Classification
di: Waldis, Andreas, et al.
Pubblicazione: (2024)
di: Waldis, Andreas, et al.
Pubblicazione: (2024)
Decoding Multilingual Moral Preferences: Unveiling LLM's Biases Through the Moral Machine Experiment
di: Vida, Karina, et al.
Pubblicazione: (2024)
di: Vida, Karina, et al.
Pubblicazione: (2024)
Sensitivity, Performance, Robustness: Deconstructing the Effect of Sociodemographic Prompting
di: Beck, Tilman, et al.
Pubblicazione: (2023)
di: Beck, Tilman, et al.
Pubblicazione: (2023)
STRICTA: Structured Reasoning in Critical Text Assessment for Peer Review and Beyond
di: Dycke, Nils, et al.
Pubblicazione: (2024)
di: Dycke, Nils, et al.
Pubblicazione: (2024)
What Can Natural Language Processing Do for Peer Review?
di: Kuznetsov, Ilia, et al.
Pubblicazione: (2024)
di: Kuznetsov, Ilia, et al.
Pubblicazione: (2024)
Position on LLM-Assisted Peer Review: Addressing Reviewer Gap through Mentoring and Feedback
di: Yun, JungMin, et al.
Pubblicazione: (2026)
di: Yun, JungMin, et al.
Pubblicazione: (2026)
Automatic Reviewers Fail to Detect Faulty Reasoning in Research Papers: A New Counterfactual Evaluation Framework
di: Dycke, Nils, et al.
Pubblicazione: (2025)
di: Dycke, Nils, et al.
Pubblicazione: (2025)
Aligned Probing: Relating Toxic Behavior and Model Internals
di: Waldis, Andreas, et al.
Pubblicazione: (2025)
di: Waldis, Andreas, et al.
Pubblicazione: (2025)
Policies Permitting LLM Use for Polishing Peer Reviews Are Currently Not Enforceable
di: Saha, Rounak, et al.
Pubblicazione: (2026)
di: Saha, Rounak, et al.
Pubblicazione: (2026)
DeepReviewer 2.0: A Traceable Agentic System for Auditable Scientific Peer Review
di: Weng, Yixuan, et al.
Pubblicazione: (2026)
di: Weng, Yixuan, et al.
Pubblicazione: (2026)
Exposía: Teaching and Assessment of Academic Writing Skills for Research Project Proposals and Peer Feedback
di: Zyska, Dennis, et al.
Pubblicazione: (2026)
di: Zyska, Dennis, et al.
Pubblicazione: (2026)
Benchmark on Peer Review Toxic Detection: A Challenging Task with a New Dataset
di: Luo, Man, et al.
Pubblicazione: (2025)
di: Luo, Man, et al.
Pubblicazione: (2025)
Local Contrastive Editing of Gender Stereotypes
di: Lutz, Marlene, et al.
Pubblicazione: (2024)
di: Lutz, Marlene, et al.
Pubblicazione: (2024)
Hidden Prompts in Manuscripts Exploit AI-Assisted Peer Review
di: Lin, Zhicheng
Pubblicazione: (2025)
di: Lin, Zhicheng
Pubblicazione: (2025)
Robust Pronoun Fidelity with English LLMs: Are they Reasoning, Repeating, or Just Biased?
di: Gautam, Vagrant, et al.
Pubblicazione: (2024)
di: Gautam, Vagrant, et al.
Pubblicazione: (2024)
Stop! In the Name of Flaws: Disentangling Personal Names and Sociodemographic Attributes in NLP
di: Gautam, Vagrant, et al.
Pubblicazione: (2024)
di: Gautam, Vagrant, et al.
Pubblicazione: (2024)
Common Sense vs. Morality: The Curious Case of Narrative Focus Bias in LLMs
di: Purkayastha, Saugata, et al.
Pubblicazione: (2026)
di: Purkayastha, Saugata, et al.
Pubblicazione: (2026)
LLM-Generated or Human-Written? Comparing Review and Non-Review Papers on ArXiv
di: Elazar, Yanai, et al.
Pubblicazione: (2026)
di: Elazar, Yanai, et al.
Pubblicazione: (2026)
LLM-as-a-Reviewer: Benchmarking Their Ability, Divergence, and Prompt Injection Resistance as Paper Reviewers
di: Li, Lingyao, et al.
Pubblicazione: (2026)
di: Li, Lingyao, et al.
Pubblicazione: (2026)
Beyond "Not Novel Enough": Enriching Scholarly Critique with LLM-Assisted Feedback
di: Afzal, Osama Mohammed, et al.
Pubblicazione: (2025)
di: Afzal, Osama Mohammed, et al.
Pubblicazione: (2025)
LLM Review: Enhancing Creative Writing via Blind Peer Review Feedback
di: Li, Weiyue, et al.
Pubblicazione: (2026)
di: Li, Weiyue, et al.
Pubblicazione: (2026)
Position: The AI Conference Peer Review Crisis Demands Author Feedback and Reviewer Rewards
di: Kim, Jaeho, et al.
Pubblicazione: (2025)
di: Kim, Jaeho, et al.
Pubblicazione: (2025)
SciCoQA: Quality Assurance for Scientific Paper--Code Alignment
di: Baumgärtner, Tim, et al.
Pubblicazione: (2026)
di: Baumgärtner, Tim, et al.
Pubblicazione: (2026)
AgentReview: Exploring Peer Review Dynamics with LLM Agents
di: Jin, Yiqiao, et al.
Pubblicazione: (2024)
di: Jin, Yiqiao, et al.
Pubblicazione: (2024)
Understanding the LLM-ification of CHI: Unpacking the Impact of LLMs at CHI through a Systematic Literature Review
di: Pang, Rock Yuren, et al.
Pubblicazione: (2025)
di: Pang, Rock Yuren, et al.
Pubblicazione: (2025)
A Scoping Review of LLM-as-a-Judge in Healthcare and the MedJUDGE Framework
di: Li, Chenyu, et al.
Pubblicazione: (2026)
di: Li, Chenyu, et al.
Pubblicazione: (2026)
LLM Roleplay: Simulating Human-Chatbot Interaction
di: Tamoyan, Hovhannes, et al.
Pubblicazione: (2024)
di: Tamoyan, Hovhannes, et al.
Pubblicazione: (2024)
A Comprehensive Review of Datasets for Clinical Mental Health AI Systems
di: Mandal, Aishik, et al.
Pubblicazione: (2025)
di: Mandal, Aishik, et al.
Pubblicazione: (2025)
Ethical Concern Identification in NLP: A Corpus of ACL Anthology Ethics Statements
di: Karamolegkou, Antonia, et al.
Pubblicazione: (2024)
di: Karamolegkou, Antonia, et al.
Pubblicazione: (2024)
When Your Reviewer is an LLM: Biases, Divergence, and Prompt Injection Risks in Peer Review
di: Zhu, Changjia, et al.
Pubblicazione: (2025)
di: Zhu, Changjia, et al.
Pubblicazione: (2025)
Learning from Implicit User Feedback, Emotions and Demographic Information in Task-Oriented and Document-Grounded Dialogues
di: Petrak, Dominic, et al.
Pubblicazione: (2024)
di: Petrak, Dominic, et al.
Pubblicazione: (2024)
Computational Studies in Influencer Marketing: A Systematic Literature Review
di: Gui, Haoyang, et al.
Pubblicazione: (2025)
di: Gui, Haoyang, et al.
Pubblicazione: (2025)
Optimizing Peer Grading: A Systematic Literature Review of Reviewer Assignment Strategies and Quantity of Reviewers
di: Paul, Uchswas, et al.
Pubblicazione: (2025)
di: Paul, Uchswas, et al.
Pubblicazione: (2025)
Documenti analoghi
-
LazyReview A Dataset for Uncovering Lazy Thinking in NLP Peer Reviews
di: Purkayastha, Sukannya, et al.
Pubblicazione: (2025) -
Decision-Making with Deliberation: Meta-reviewing as a Document-grounded Dialogue
di: Purkayastha, Sukannya, et al.
Pubblicazione: (2025) -
Commitment Checklist: Auditing Author Commitments in Peer Review
di: Chen, Chung-Chi, et al.
Pubblicazione: (2026) -
The Good, the Bad and the Constructive: Automatically Measuring Peer Review's Utility for Authors
di: Sadallah, Abdelrahman, et al.
Pubblicazione: (2025) -
Is Peer Review Really in Decline? Analyzing Review Quality across Venues and Time
di: Kuznetsov, Ilia, et al.
Pubblicazione: (2026)