Buchumschlag

Vector Quantized Latent Concepts: A Scalable Alternative to Clustering-Based Concept Discovery

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Yu, Xuemin, Garg, Ankur, Kahou, Samira Ebrahimi, Sajjad, Hassan
Format:	Preprint
Veröffentlicht:	2026
Schlagworte:	Machine Learning Computation and Language
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Cross-Layer Discrete Concept Discovery for Interpreting Language Models
von: Garg, Ankur, et al.
Veröffentlicht: (2025)

Latent Concept-based Explanation of NLP Models
von: Yu, Xuemin, et al.
Veröffentlicht: (2024)

KD-LoRA: A Hybrid Approach to Efficient Fine-Tuning with LoRA and Knowledge Distillation
von: Azimi, Rambod, et al.
Veröffentlicht: (2024)

Interpreting the Effects of Quantization on LLMs
von: Singh, Manpreet, et al.
Veröffentlicht: (2025)

Causality $\neq$ Invariance: Function and Concept Vectors in LLMs
von: Opiełka, Gustaw, et al.
Veröffentlicht: (2026)

From Concepts to Components: Concept-Agnostic Attention Module Discovery in Transformers
von: Su, Jingtong, et al.
Veröffentlicht: (2025)

Beyond Single Concept Vector: Modeling Concept Subspace in LLMs with Gaussian Distribution
von: Zhao, Haiyan, et al.
Veröffentlicht: (2024)

Use Sparse Autoencoders to Discover Unknown Concepts, Not to Act on Known Concepts
von: Peng, Kenny, et al.
Veröffentlicht: (2025)

Analogical Reasoning Inside Large Language Models: Concept Vectors and the Limits of Abstraction
von: Opiełka, Gustaw, et al.
Veröffentlicht: (2025)

Latent Concept Disentanglement in Transformer-based Language Models
von: Hong, Guan Zhe, et al.
Veröffentlicht: (2025)

Fair In-Context Learning via Latent Concept Variables
von: Bhaila, Karuna, et al.
Veröffentlicht: (2024)

LLM Pretraining with Continuous Concepts
von: Tack, Jihoon, et al.
Veröffentlicht: (2025)

MedConceptsQA: Open Source Medical Concepts QA Benchmark
von: Shoham, Ofir Ben, et al.
Veröffentlicht: (2024)

Kernelized Concept Erasure
von: Ravfogel, Shauli, et al.
Veröffentlicht: (2022)

Adaptive Group Robust Ensemble Knowledge Distillation
von: Kenfack, Patrik, et al.
Veröffentlicht: (2024)

Towards Fair In-Context Learning with Tabular Foundation Models
von: Kenfack, Patrik, et al.
Veröffentlicht: (2025)

Learning to Play Atari in a World of Tokens
von: Agarwal, Pranav, et al.
Veröffentlicht: (2024)

Predictive Concept Decoders: Training Scalable End-to-End Interpretability Assistants
von: Huang, Vincent, et al.
Veröffentlicht: (2025)

Concept Algebra for (Score-Based) Text-Controlled Generative Models
von: Wang, Zihao, et al.
Veröffentlicht: (2023)

Towards Compositionality in Concept Learning
von: Stein, Adam, et al.
Veröffentlicht: (2024)

Linear Adversarial Concept Erasure
von: Ravfogel, Shauli, et al.
Veröffentlicht: (2022)

Scalable Prompt Routing via Fine-Grained Latent Task Discovery
von: Zhang, Yunyi, et al.
Veröffentlicht: (2026)

Mathematical Reasoning via Intervention-Based Time-Series Causal Discovery Using LLMs as Concept Mastery Simulators
von: Okita, Tsuyoshi
Veröffentlicht: (2026)

Robust Training of Vector Quantized Bottleneck Models
von: Łańcucki, Adrian, et al.
Veröffentlicht: (2020)

Quantifying the Capabilities of LLMs across Scale and Precision
von: Badshah, Sher, et al.
Veröffentlicht: (2024)

CAMMARL: Conformal Action Modeling in Multi Agent Reinforcement Learning
von: Gupta, Nikunj, et al.
Veröffentlicht: (2023)

Locally Constrained Representations in Reinforcement Learning
von: Nath, Somjit, et al.
Veröffentlicht: (2022)

Concept Bottleneck Large Language Models
von: Sun, Chung-En, et al.
Veröffentlicht: (2024)

Concept Tokens: Learning Behavioral Embeddings Through Concept Definitions
von: Sastre, Ignacio, et al.
Veröffentlicht: (2026)

CLUE: Concept-Level Uncertainty Estimation for Large Language Models
von: Wang, Yu-Hsiang, et al.
Veröffentlicht: (2024)

Revisiting Adaptive Rounding with Vectorized Reparameterization for LLM Quantization
von: Zhou, Yuli, et al.
Veröffentlicht: (2026)

Simple Mechanisms for Representing, Indexing and Manipulating Concepts
von: Li, Yuanzhi, et al.
Veröffentlicht: (2023)

AlignSAE: Concept-Aligned Sparse Autoencoders
von: Yang, Minglai, et al.
Veröffentlicht: (2025)

Exploring Concept Depth: How Large Language Models Acquire Knowledge and Concept at Different Layers?
von: Jin, Mingyu, et al.
Veröffentlicht: (2024)

CRVQ: Channel-Relaxed Vector Quantization for Extreme Compression of LLMs
von: Xu, Yuzhuang, et al.
Veröffentlicht: (2024)

Concept-Centric Token Interpretation for Vector-Quantized Generative Models
von: Yang, Tianze, et al.
Veröffentlicht: (2025)

Do Vision and Language Models Share Concepts? A Vector Space Alignment Study
von: Li, Jiaang, et al.
Veröffentlicht: (2023)

Evaluating Sparse Autoencoders on Targeted Concept Erasure Tasks
von: Karvonen, Adam, et al.
Veröffentlicht: (2024)

Nonlinear Concept Erasure: a Density Matching Approach
von: Saillenfest, Antoine, et al.
Veröffentlicht: (2025)

Khattat: Enhancing Readability and Concept Representation of Semantic Typography
von: Hussein, Ahmed, et al.
Veröffentlicht: (2024)