Buchumschlag

When Vision-Language Models Judge Without Seeing: Exposing Informativeness Bias

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Zou, Xiaohan, Sridhar, Roshan, Safarzadeh, Mohammadtaher, Roth, Dan
Format:	Preprint
Veröffentlicht:	2026
Schlagworte:	Artificial Intelligence
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Evaluating NL2SQL via SQL2NL
von: Safarzadeh, Mohammadtaher, et al.
Veröffentlicht: (2025)

SPENCE: A Syntactic Probe for Detecting Contamination in NL2SQL Benchmarks
von: Safarzadeh, Mohammadtaher, et al.
Veröffentlicht: (2026)

Freeze and Reveal: Exposing Modality Bias in Vision-Language Models
von: Kavuri, Vivek Hruday, et al.
Veröffentlicht: (2025)

Hidden Clones: Exposing and Fixing Family Bias in Vision-Language Model Ensembles
von: Bugaud, Zacharie
Veröffentlicht: (2026)

Tree-based Dialogue Reinforced Policy Optimization for Red-Teaming Attacks
von: Guo, Ruohao, et al.
Veröffentlicht: (2025)

When Seeing Overrides Knowing: Disentangling Knowledge Conflicts in Vision-Language Models
von: Ortu, Francesco, et al.
Veröffentlicht: (2025)

Vision Language Models See What You Want but not What You See
von: Gao, Qingying, et al.
Veröffentlicht: (2024)

Large Causal Models from Large Language Models
von: Mahadevan, Sridhar
Veröffentlicht: (2025)

HInter: Exposing Hidden Intersectional Bias in Large Language Models
von: Souani, Badr, et al.
Veröffentlicht: (2025)

When Agents See Humans as the Outgroup: Belief-Dependent Bias in LLM-Powered Agents
von: Wang, Zongwei, et al.
Veröffentlicht: (2026)

Jigsaw-Puzzles: From Seeing to Understanding to Reasoning in Vision-Language Models
von: Lyu, Zesen, et al.
Veröffentlicht: (2025)

Efficient Bias Mitigation Without Privileged Information
von: Zarlenga, Mateo Espinosa, et al.
Veröffentlicht: (2024)

Judging the Judges: A Systematic Evaluation of Bias Mitigation Strategies in LLM-as-a-Judge Pipelines
von: Soumik, Sadman Kabir
Veröffentlicht: (2026)

Multimodal Language Models See Better When They Look Shallower
von: Chen, Haoran, et al.
Veröffentlicht: (2025)

Automated Localization of Blood Vessels in Retinal Images
von: Safarzadeh, Vahid Mohammadi
Veröffentlicht: (2023)

RICL: Adding In-Context Adaptability to Pre-Trained Vision-Language-Action Models
von: Sridhar, Kaustubh, et al.
Veröffentlicht: (2025)

A Peek into Token Bias: Large Language Models Are Not Yet Genuine Reasoners
von: Jiang, Bowen, et al.
Veröffentlicht: (2024)

Seeing the Abstract: Translating the Abstract Language for Vision Language Models
von: Talon, Davide, et al.
Veröffentlicht: (2025)

Judging the Judges: A Systematic Study of Position Bias in LLM-as-a-Judge
von: Shi, Lin, et al.
Veröffentlicht: (2024)

Decoding Biases: Automated Methods and LLM Judges for Gender Bias Detection in Language Models
von: Kumar, Shachi H, et al.
Veröffentlicht: (2024)

CorBenchX: Large-Scale Chest X-Ray Error Dataset and Vision-Language Model Benchmark for Report Error Correction
von: Zou, Jing, et al.
Veröffentlicht: (2025)

BLINK: Multimodal Large Language Models Can See but Not Perceive
von: Fu, Xingyu, et al.
Veröffentlicht: (2024)

When AIs Judge AIs: The Rise of Agent-as-a-Judge Evaluation for LLMs
von: Yu, Fangyi
Veröffentlicht: (2025)

Egocentric Bias in Vision-Language Models
von: Wang, Maijunxian, et al.
Veröffentlicht: (2026)

Judging by Appearances? Auditing and Intervening Vision-Language Models for Bail Prediction
von: Basu, Sagnik, et al.
Veröffentlicht: (2025)

Fairness or Fluency? An Investigation into Language Bias of Pairwise LLM-as-a-Judge
von: Zhou, Xiaolin, et al.
Veröffentlicht: (2026)

Context Over Content: Exposing Evaluation Faking in Automated Judges
von: Gupta, Manan, et al.
Veröffentlicht: (2026)

JAF: Judge Agent Forest
von: Garg, Sahil, et al.
Veröffentlicht: (2026)

Not All Tokens See Equally: Perception-Grounded Policy Optimization for Large Vision-Language Models
von: Ye, Zekai, et al.
Veröffentlicht: (2026)

Exposing Product Bias in LLM Investment Recommendation
von: Zhi, Yuhan, et al.
Veröffentlicht: (2025)

SocREval: Large Language Models with the Socratic Method for Reference-Free Reasoning Evaluation
von: He, Hangfeng, et al.
Veröffentlicht: (2023)

JudgeLRM: Large Reasoning Models as a Judge
von: Chen, Nuo, et al.
Veröffentlicht: (2025)

Seeing Through Experts Eyes A Foundational Vision Language Model Trained on Radiologists Gaze and Reasoning
von: Lee, Kinhei, et al.
Veröffentlicht: (2026)

Topos Causal Models
von: Mahadevan, Sridhar
Veröffentlicht: (2025)

Beyond Consensus: Mitigating the Agreeableness Bias in LLM Judge Evaluations
von: Jain, Suryaansh, et al.
Veröffentlicht: (2025)

PairBench: Are Vision-Language Models Reliable at Comparing What They See?
von: Feizi, Aarash, et al.
Veröffentlicht: (2025)

Discovering Latent Knowledge in Language Models Without Supervision
von: Burns, Collin, et al.
Veröffentlicht: (2022)

Mitigating Translationese Bias in Multilingual LLM-as-a-Judge via Disentangled Information Bottleneck
von: Zhang, Hongbin, et al.
Veröffentlicht: (2026)

Beyond Reproducibility: Token Probabilities Expose Large Language Model Nondeterminism
von: Fu, Tairan, et al.
Veröffentlicht: (2026)

Benchmarking Adversarial Robustness to Bias Elicitation in Large Language Models: Scalable Automated Assessment with LLM-as-a-Judge
von: Cantini, Riccardo, et al.
Veröffentlicht: (2025)