Truthfulness Despite Weak Supervision: Evaluating and Training LLMs Using Peer Prediction
Fuente:
arXiv
Gespeichert in:
| Hauptverfasser: | Qiu, Tianyi Alex, Carroll, Micah, Allen, Cameron |
|---|---|
| Format: | Preprint |
| Veröffentlicht: |
2026
|
| Schlagworte: | |
| Online-Zugang: | |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
Ähnliche Einträge
Peer-Predictive Self-Training for Language Model Reasoning
von: Feng, Shi, et al.
Veröffentlicht: (2026)
von: Feng, Shi, et al.
Veröffentlicht: (2026)
Representative Social Choice: From Learning Theory to AI Alignment
von: Qiu, Tianyi
Veröffentlicht: (2024)
von: Qiu, Tianyi
Veröffentlicht: (2024)
Incentivizing Truthful Language Models via Peer Elicitation Games
von: Chen, Baiting, et al.
Veröffentlicht: (2025)
von: Chen, Baiting, et al.
Veröffentlicht: (2025)
On The Truthfulness of 'Surprisingly Likely' Responses of Large Language Models
von: Goel, Naman
Veröffentlicht: (2023)
von: Goel, Naman
Veröffentlicht: (2023)
GameTalk: Training LLMs for Strategic Conversation
von: Vendrell, Victor Conchello, et al.
Veröffentlicht: (2026)
von: Vendrell, Victor Conchello, et al.
Veröffentlicht: (2026)
The Limits of Preference Data for Post-Training
von: Zhao, Eric, et al.
Veröffentlicht: (2025)
von: Zhao, Eric, et al.
Veröffentlicht: (2025)
Ad Auctions for LLMs via Retrieval Augmented Generation
von: Hajiaghayi, MohammadTaghi, et al.
Veröffentlicht: (2024)
von: Hajiaghayi, MohammadTaghi, et al.
Veröffentlicht: (2024)
Truthful Aggregation of LLMs with an Application to Online Advertising
von: Soumalias, Ermis, et al.
Veröffentlicht: (2024)
von: Soumalias, Ermis, et al.
Veröffentlicht: (2024)
COMAL: A Convergent Meta-Algorithm for Aligning LLMs with General Preferences
von: Liu, Yixin, et al.
Veröffentlicht: (2024)
von: Liu, Yixin, et al.
Veröffentlicht: (2024)
Iterative Nash Policy Optimization: Aligning LLMs with General Preferences via No-Regret Learning
von: Zhang, Yuheng, et al.
Veröffentlicht: (2024)
von: Zhang, Yuheng, et al.
Veröffentlicht: (2024)
Used Car Salesbots? Honesty and Credulity of LLMs as Bargaining Agents under Partial Information
von: Miceli-Barone, Antonio Valerio, et al.
Veröffentlicht: (2026)
von: Miceli-Barone, Antonio Valerio, et al.
Veröffentlicht: (2026)
Stochastically Dominant Peer Prediction
von: Zhang, Yichi, et al.
Veröffentlicht: (2025)
von: Zhang, Yichi, et al.
Veröffentlicht: (2025)
Learning Truthful Mechanisms without Discretization
von: Ma, Yunxuan, et al.
Veröffentlicht: (2025)
von: Ma, Yunxuan, et al.
Veröffentlicht: (2025)
PrefBench: Evaluating Zero-Shot LLM Agents in Hidden-Preference Personalized Pricing Negotiations
von: Lei, Yingjie
Veröffentlicht: (2026)
von: Lei, Yingjie
Veröffentlicht: (2026)
Can LLMs Replace Economic Choice Prediction Labs? The Case of Language-based Persuasion Games
von: Shapira, Eilam, et al.
Veröffentlicht: (2024)
von: Shapira, Eilam, et al.
Veröffentlicht: (2024)
Language Self-Play For Data-Free Training
von: Kuba, Jakub Grudzien, et al.
Veröffentlicht: (2025)
von: Kuba, Jakub Grudzien, et al.
Veröffentlicht: (2025)
How Well Can LLMs Negotiate? NegotiationArena Platform and Analysis
von: Bianchi, Federico, et al.
Veröffentlicht: (2024)
von: Bianchi, Federico, et al.
Veröffentlicht: (2024)
PokerBench: Training Large Language Models to become Professional Poker Players
von: Zhuang, Richard, et al.
Veröffentlicht: (2025)
von: Zhuang, Richard, et al.
Veröffentlicht: (2025)
Why Do LLMs Struggle in Strategic Play? Broken Links Between Observations, Beliefs, and Actions
von: Sobotka, Jan, et al.
Veröffentlicht: (2026)
von: Sobotka, Jan, et al.
Veröffentlicht: (2026)
Reasoning Like an Economist: Post-Training on Economic Problems Induces Strategic Generalization in LLMs
von: Zhou, Yufa, et al.
Veröffentlicht: (2025)
von: Zhou, Yufa, et al.
Veröffentlicht: (2025)
Eliciting Informative Text Evaluations with Large Language Models
von: Lu, Yuxuan, et al.
Veröffentlicht: (2024)
von: Lu, Yuxuan, et al.
Veröffentlicht: (2024)
Multi-Head Attention Is a Multi-Player Game
von: Chakrabarti, Kushal, et al.
Veröffentlicht: (2026)
von: Chakrabarti, Kushal, et al.
Veröffentlicht: (2026)
On the Fundamental Impossibility of Hallucination Control in Large Language Models
von: Karpowicz, Michał P.
Veröffentlicht: (2025)
von: Karpowicz, Michał P.
Veröffentlicht: (2025)
Asymptotic Universal Alignment: A New Alignment Framework via Test-Time Scaling
von: Cai, Yang, et al.
Veröffentlicht: (2026)
von: Cai, Yang, et al.
Veröffentlicht: (2026)
Nash CoT: Multi-Path Inference with Preference Equilibrium
von: Zhang, Ziqi, et al.
Veröffentlicht: (2024)
von: Zhang, Ziqi, et al.
Veröffentlicht: (2024)
Language Alignment via Nash-learning and Adaptive feedback
von: Azarafrooz, Ari, et al.
Veröffentlicht: (2024)
von: Azarafrooz, Ari, et al.
Veröffentlicht: (2024)
Who Gets the Reward, Who Gets the Blame? Evaluation-Aligned Training Signals for Multi-LLM Agents
von: Yang, Chih-Hsuan, et al.
Veröffentlicht: (2025)
von: Yang, Chih-Hsuan, et al.
Veröffentlicht: (2025)
Evaluating LLM-Contaminated Crowdsourcing Data Without Ground Truth
von: Zhang, Yichi, et al.
Veröffentlicht: (2025)
von: Zhang, Yichi, et al.
Veröffentlicht: (2025)
LUDOBENCH: Evaluating LLM Behavioural Decision-Making Through Spot-Based Board Game Scenarios in Ludo
von: Jain, Ojas, et al.
Veröffentlicht: (2026)
von: Jain, Ojas, et al.
Veröffentlicht: (2026)
Human Choice Prediction in Language-based Persuasion Games: Simulation-based Off-Policy Evaluation
von: Shapira, Eilam, et al.
Veröffentlicht: (2023)
von: Shapira, Eilam, et al.
Veröffentlicht: (2023)
Routing, Cascades, and User Choice for LLMs
von: Mahmood, Rafid
Veröffentlicht: (2026)
von: Mahmood, Rafid
Veröffentlicht: (2026)
PokerSkill: LLMs Can Play Expert-Level Poker without Training or Solvers
von: Li, Boning, et al.
Veröffentlicht: (2026)
von: Li, Boning, et al.
Veröffentlicht: (2026)
Incentive-Aligned Multi-Source LLM Summaries
von: Jiang, Yanchen, et al.
Veröffentlicht: (2025)
von: Jiang, Yanchen, et al.
Veröffentlicht: (2025)
Generating Fair Consensus Statements with Social Choice on Token-Level MDPs
von: Blair, Carter, et al.
Veröffentlicht: (2025)
von: Blair, Carter, et al.
Veröffentlicht: (2025)
Personality Modeling for Persuasion of Misinformation using AI Agent
von: Lou, Qianmin, et al.
Veröffentlicht: (2025)
von: Lou, Qianmin, et al.
Veröffentlicht: (2025)
Framing the Game: How Context Shapes LLM Decision-Making
von: Robinson, Isaac, et al.
Veröffentlicht: (2025)
von: Robinson, Isaac, et al.
Veröffentlicht: (2025)
ALYMPICS: LLM Agents Meet Game Theory -- Exploring Strategic Decision-Making with AI Agents
von: Mao, Shaoguang, et al.
Veröffentlicht: (2023)
von: Mao, Shaoguang, et al.
Veröffentlicht: (2023)
Are Large Language Models Strategic Decision Makers? A Study of Performance and Bias in Two-Player Non-Zero-Sum Games
von: Herr, Nathan, et al.
Veröffentlicht: (2024)
von: Herr, Nathan, et al.
Veröffentlicht: (2024)
Strategic Intelligence in Large Language Models: Evidence from evolutionary Game Theory
von: Payne, Kenneth, et al.
Veröffentlicht: (2025)
von: Payne, Kenneth, et al.
Veröffentlicht: (2025)
The Language of Bargaining: Linguistic Effects in LLM Negotiations
von: Sinha, Stuti, et al.
Veröffentlicht: (2026)
von: Sinha, Stuti, et al.
Veröffentlicht: (2026)
Ähnliche Einträge
-
Peer-Predictive Self-Training for Language Model Reasoning
von: Feng, Shi, et al.
Veröffentlicht: (2026) -
Representative Social Choice: From Learning Theory to AI Alignment
von: Qiu, Tianyi
Veröffentlicht: (2024) -
Incentivizing Truthful Language Models via Peer Elicitation Games
von: Chen, Baiting, et al.
Veröffentlicht: (2025) -
On The Truthfulness of 'Surprisingly Likely' Responses of Large Language Models
von: Goel, Naman
Veröffentlicht: (2023) -
GameTalk: Training LLMs for Strategic Conversation
von: Vendrell, Victor Conchello, et al.
Veröffentlicht: (2026)