Buchumschlag

On the Brittleness of LLMs: A Journey around Set Membership

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Hergert, Lea, Berend, Gábor, Szegedy, Mario, Turan, Gyorgy, Jelasity, Márk
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Computation and Language
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Weird Generalization is Weirdly Brittle
von: Wanner, Miriam, et al.
Veröffentlicht: (2026)

LLMs Show Surface-Form Brittleness Under Paraphrase Stress Tests
von: Carranza, Juan Miguel Navarro
Veröffentlicht: (2025)

Membership Inference on LLMs in the Wild
von: Yi, Jiatong, et al.
Veröffentlicht: (2026)

LLM Knowledge is Brittle: Truthfulness Representations Rely on Superficial Resemblance
von: Haller, Patrick, et al.
Veröffentlicht: (2025)

Your Agent is More Brittle Than You Think: Uncovering Indirect Injection Vulnerabilities in Agentic LLMs
von: Zhu, Wenhui, et al.
Veröffentlicht: (2026)

Are Humans as Brittle as Large Language Models?
von: Li, Jiahui, et al.
Veröffentlicht: (2025)

Systematic Diagnosis of Brittle Reasoning in Large Language Models
von: Parupudi, V. S. Raghu
Veröffentlicht: (2025)

Fast-MIA: Efficient and Scalable Membership Inference for LLMs
von: Takahashi, Hiromu, et al.
Veröffentlicht: (2025)

Probability of Differentiation Reveals Brittleness of Homogeneity Bias in GPT-4
von: Lee, Messi H. J., et al.
Veröffentlicht: (2024)

Racka: Efficient Hungarian LLM Adaptation on Academic Infrastructure
von: Csibi, Zsolt, et al.
Veröffentlicht: (2026)

A Game for Counting Logic Formula Size and an Application to Linear Orders
von: Fournier, Gregoire, et al.
Veröffentlicht: (2025)

Measuring Bias or Measuring the Task: Understanding the Brittle Nature of LLM Gender Biases
von: Gao, Bufan, et al.
Veröffentlicht: (2025)

Tab-MIA: A Benchmark Dataset for Membership Inference Attacks on Tabular Data in LLMs
von: German, Eyal, et al.
Veröffentlicht: (2025)

Generalization or Memorization? Brittleness Testing for Chess-Trained Language Models
von: Tang, Ethan
Veröffentlicht: (2026)

Brittleness and Promise: Knowledge Graph Based Reward Modeling for Diagnostic Reasoning
von: Khatwani, Saksham, et al.
Veröffentlicht: (2025)

On the Brittle Foundations of ReAct Prompting for Agentic Large Language Models
von: Verma, Mudit, et al.
Veröffentlicht: (2024)

Brittle Minds, Fixable Activations: Understanding Belief Representations in Language Models
von: Bortoletto, Matteo, et al.
Veröffentlicht: (2024)

From Patient Consultations to Graphs: Leveraging LLMs for Patient Journey Knowledge Graph Construction
von: Khatib, Hassan S. Al, et al.
Veröffentlicht: (2025)

Is My Text in Your AI Model? Gradient-based Membership Inference Test applied to LLMs
von: Mancera, Gonzalo, et al.
Veröffentlicht: (2025)

SoK: Membership Inference Attacks on LLMs are Rushing Nowhere (and How to Fix It)
von: Meeus, Matthieu, et al.
Veröffentlicht: (2024)

Whose Journey Matters? Investigating Identity Biases in Large Language Models (LLMs) for Travel Planning Assistance
von: Ren, Ruiping, et al.
Veröffentlicht: (2024)

Machine Text Detectors are Membership Inference Attacks
von: Koike, Ryuto, et al.
Veröffentlicht: (2025)

Evaluating the Adversarial Robustness of Semantic Segmentation: Trying Harder Pays Off
von: Halmosi, Levente, et al.
Veröffentlicht: (2024)

Assessing the Brittleness of Safety Alignment via Pruning and Low-Rank Modifications
von: Wei, Boyi, et al.
Veröffentlicht: (2024)

How Brittle is Agent Safety? Rethinking Agent Risk under Intent Concealment and Task Complexity
von: Ma, Zihan, et al.
Veröffentlicht: (2025)

Unknown Unknowns: Why Hidden Intentions in LLMs Evade Detection
von: Srivastav, Devansh, et al.
Veröffentlicht: (2026)

LLMs for Argument Mining: Detection, Extraction, and Relationship Classification of pre-defined Arguments in Online Comments
von: Guida, Matteo, et al.
Veröffentlicht: (2025)

Sampling-based Pseudo-Likelihood for Membership Inference Attacks
von: Kaneko, Masahiro, et al.
Veröffentlicht: (2024)

Comparing Moral Values in Western English-speaking societies and LLMs with Word Associations
von: Xiang, Chaoyi, et al.
Veröffentlicht: (2025)

Frontier LLMs Still Struggle with Simple Reasoning Tasks
von: Malek, Alan, et al.
Veröffentlicht: (2025)

Grokked Transformers are Implicit Reasoners: A Mechanistic Journey to the Edge of Generalization
von: Wang, Boshi, et al.
Veröffentlicht: (2024)

BanStereoSet: A Dataset to Measure Stereotypical Social Biases in LLMs for Bangla
von: Kamruzzaman, Mahammed, et al.
Veröffentlicht: (2024)

The Surprising Effectiveness of Membership Inference with Simple N-Gram Coverage
von: Hallinan, Skyler, et al.
Veröffentlicht: (2025)

Do Membership Inference Attacks Work on Large Language Models?
von: Duan, Michael, et al.
Veröffentlicht: (2024)

SmoothRot: Combining Channel-Wise Scaling and Rotation for Quantization-Friendly LLMs
von: Czakó, Patrik, et al.
Veröffentlicht: (2025)

A GLR-like Parsing Algorithm for Three-Valued Interpretations of Boolean Grammars with Strong Negation
von: Adrián, Patrik, et al.
Veröffentlicht: (2024)

Building Patient Journeys in Hebrew: A Language Model for Clinical Timeline Extraction
von: Hashiloni, Kai Golan, et al.
Veröffentlicht: (2025)

DocMIA: Document-Level Membership Inference Attacks against DocVQA Models
von: Nguyen, Khanh, et al.
Veröffentlicht: (2025)

Connecting Quantum Computing with Classical Stochastic Simulation
von: Blanchet, Jose, et al.
Veröffentlicht: (2025)

Detecting Semantic Backdoors in a Mystery Shopping Scenario
von: Berta, Arpad, et al.
Veröffentlicht: (2026)