Mask the Target: A Plug-and-Play Regularizer Against LoRA Forgetting
Fuente:
arXiv
Salvato in:
| Autori principali: | Xu, Runze, Garg, Arpit, Saratchandran, Hemanth, Lucey, Simon |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2026
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
SineProject: Machine Unlearning for Stable Vision Language Alignment
di: Garg, Arpit, et al.
Pubblicazione: (2025)
di: Garg, Arpit, et al.
Pubblicazione: (2025)
Enhancing Transformers Through Conditioned Embedded Tokens
di: Saratchandran, Hemanth, et al.
Pubblicazione: (2025)
di: Saratchandran, Hemanth, et al.
Pubblicazione: (2025)
Invertible Neural Warp for NeRF
di: Chng, Shin-Fang, et al.
Pubblicazione: (2024)
di: Chng, Shin-Fang, et al.
Pubblicazione: (2024)
Weight Conditioning for Smooth Optimization of Neural Networks
di: Saratchandran, Hemanth, et al.
Pubblicazione: (2024)
di: Saratchandran, Hemanth, et al.
Pubblicazione: (2024)
From Activation to Initialization: Scaling Insights for Optimizing Neural Fields
di: Saratchandran, Hemanth, et al.
Pubblicazione: (2024)
di: Saratchandran, Hemanth, et al.
Pubblicazione: (2024)
Leaner Transformers: More Heads, Less Depth
di: Saratchandran, Hemanth, et al.
Pubblicazione: (2025)
di: Saratchandran, Hemanth, et al.
Pubblicazione: (2025)
Vision as LoRA
di: Wang, Han, et al.
Pubblicazione: (2025)
di: Wang, Han, et al.
Pubblicazione: (2025)
Structured Initialization for Vision Transformers
di: Zheng, Jianqiao, et al.
Pubblicazione: (2025)
di: Zheng, Jianqiao, et al.
Pubblicazione: (2025)
Preconditioners for the Stochastic Training of Neural Fields
di: Chng, Shin-Fang, et al.
Pubblicazione: (2024)
di: Chng, Shin-Fang, et al.
Pubblicazione: (2024)
RandLoRA: Full-rank parameter-efficient fine-tuning of large models
di: Albert, Paul, et al.
Pubblicazione: (2025)
di: Albert, Paul, et al.
Pubblicazione: (2025)
Always Skip Attention
di: Ji, Yiping, et al.
Pubblicazione: (2025)
di: Ji, Yiping, et al.
Pubblicazione: (2025)
In-Context Meta LoRA Generation
di: Shao, Yihua, et al.
Pubblicazione: (2025)
di: Shao, Yihua, et al.
Pubblicazione: (2025)
NOLA: Compressing LoRA using Linear Combination of Random Basis
di: Koohpayegani, Soroush Abbasi, et al.
Pubblicazione: (2023)
di: Koohpayegani, Soroush Abbasi, et al.
Pubblicazione: (2023)
From Tables to Signals: Revealing Spectral Adaptivity in TabPFN
di: Zheng, Jianqiao, et al.
Pubblicazione: (2025)
di: Zheng, Jianqiao, et al.
Pubblicazione: (2025)
Rethinking Attention: Polynomial Alternatives to Softmax in Transformers
di: Saratchandran, Hemanth, et al.
Pubblicazione: (2024)
di: Saratchandran, Hemanth, et al.
Pubblicazione: (2024)
D'OH: Decoder-Only Random Hypernetworks for Implicit Neural Representations
di: Gordon, Cameron, et al.
Pubblicazione: (2024)
di: Gordon, Cameron, et al.
Pubblicazione: (2024)
Octavius: Mitigating Task Interference in MLLMs via LoRA-MoE
di: Chen, Zeren, et al.
Pubblicazione: (2023)
di: Chen, Zeren, et al.
Pubblicazione: (2023)
Efficient Learning With Sine-Activated Low-rank Matrices
di: Ji, Yiping, et al.
Pubblicazione: (2024)
di: Ji, Yiping, et al.
Pubblicazione: (2024)
LoRA-Edit: Controllable First-Frame-Guided Video Editing via Mask-Aware LoRA Fine-Tuning
di: Gao, Chenjian, et al.
Pubblicazione: (2025)
di: Gao, Chenjian, et al.
Pubblicazione: (2025)
Evolutionary Negative Module Pruning for Better LoRA Merging
di: Cao, Anda, et al.
Pubblicazione: (2026)
di: Cao, Anda, et al.
Pubblicazione: (2026)
TAS-LoRA: Transformer Architecture Search with Mixture-of-LoRA Experts
di: Jeon, Jeimin, et al.
Pubblicazione: (2026)
di: Jeon, Jeimin, et al.
Pubblicazione: (2026)
Multi-LoRA Composition for Image Generation
di: Zhong, Ming, et al.
Pubblicazione: (2024)
di: Zhong, Ming, et al.
Pubblicazione: (2024)
TC-LoRA: Temporally Modulated Conditional LoRA for Adaptive Diffusion Control
di: Cho, Minkyoung, et al.
Pubblicazione: (2025)
di: Cho, Minkyoung, et al.
Pubblicazione: (2025)
NP-LoRA: Null Space Projection for Subject-Style LoRA Fusion
di: Chen, Chuheng, et al.
Pubblicazione: (2025)
di: Chen, Chuheng, et al.
Pubblicazione: (2025)
UnGuide: Learning to Forget with LoRA-Guided Diffusion Models
di: Polowczyk, Agnieszka, et al.
Pubblicazione: (2025)
di: Polowczyk, Agnieszka, et al.
Pubblicazione: (2025)
How LoRA Remembers? A Parametric Memory Law for LLM Finetuning
di: Xu, Ziwen, et al.
Pubblicazione: (2026)
di: Xu, Ziwen, et al.
Pubblicazione: (2026)
Video2LoRA: Unified Semantic-Controlled Video Generation via Per-Reference-Video LoRA
di: Wu, Zexi, et al.
Pubblicazione: (2026)
di: Wu, Zexi, et al.
Pubblicazione: (2026)
MLAE: Masked LoRA Experts for Visual Parameter-Efficient Fine-Tuning
di: Wang, Junjie, et al.
Pubblicazione: (2024)
di: Wang, Junjie, et al.
Pubblicazione: (2024)
Meta-LoRA: Meta-Learning LoRA Components for Domain-Aware ID Personalization
di: Topal, Barış Batuhan, et al.
Pubblicazione: (2025)
di: Topal, Barış Batuhan, et al.
Pubblicazione: (2025)
CA-LoRA: Concept-Aware LoRA for Domain-Aligned Segmentation Dataset Generation
di: Park, Minho, et al.
Pubblicazione: (2025)
di: Park, Minho, et al.
Pubblicazione: (2025)
LoRA-FAIR: Federated LoRA Fine-Tuning with Aggregation and Initialization Refinement
di: Bian, Jieming, et al.
Pubblicazione: (2024)
di: Bian, Jieming, et al.
Pubblicazione: (2024)
A Novel Trustworthy Video Summarization Algorithm Through a Mixture of LoRA Experts
di: Du, Wenzhuo, et al.
Pubblicazione: (2025)
di: Du, Wenzhuo, et al.
Pubblicazione: (2025)
LiON-LoRA: Rethinking LoRA Fusion to Unify Controllable Spatial and Temporal Generation for Video Diffusion
di: Zhang, Yisu, et al.
Pubblicazione: (2025)
di: Zhang, Yisu, et al.
Pubblicazione: (2025)
Plug-and-Play Grounding of Reasoning in Multimodal Large Language Models
di: Chen, Jiaxing, et al.
Pubblicazione: (2024)
di: Chen, Jiaxing, et al.
Pubblicazione: (2024)
Think When Needed: Adaptive Reasoning-Driven Multimodal Embeddings with a Dual-LoRA Architecture
di: Zhang, Longxiang, et al.
Pubblicazione: (2026)
di: Zhang, Longxiang, et al.
Pubblicazione: (2026)
NAS-LoRA: Empowering Parameter-Efficient Fine-Tuning for Visual Foundation Models with Searchable Adaptation
di: Chen, Renqi, et al.
Pubblicazione: (2025)
di: Chen, Renqi, et al.
Pubblicazione: (2025)
ChimeraLoRA: Multi-Head LoRA-Guided Synthetic Datasets
di: Kim, Hoyoung, et al.
Pubblicazione: (2026)
di: Kim, Hoyoung, et al.
Pubblicazione: (2026)
Multimodal Instruction Tuning with Conditional Mixture of LoRA
di: Shen, Ying, et al.
Pubblicazione: (2024)
di: Shen, Ying, et al.
Pubblicazione: (2024)
LoRA of Change: Learning to Generate LoRA for the Editing Instruction from A Single Before-After Image Pair
di: Song, Xue, et al.
Pubblicazione: (2024)
di: Song, Xue, et al.
Pubblicazione: (2024)
LangVision-LoRA-NAS: Neural Architecture Search for Variable LoRA Rank in Vision Language Models
di: Chitty-Venkata, Krishna Teja, et al.
Pubblicazione: (2025)
di: Chitty-Venkata, Krishna Teja, et al.
Pubblicazione: (2025)
Documenti analoghi
-
SineProject: Machine Unlearning for Stable Vision Language Alignment
di: Garg, Arpit, et al.
Pubblicazione: (2025) -
Enhancing Transformers Through Conditioned Embedded Tokens
di: Saratchandran, Hemanth, et al.
Pubblicazione: (2025) -
Invertible Neural Warp for NeRF
di: Chng, Shin-Fang, et al.
Pubblicazione: (2024) -
Weight Conditioning for Smooth Optimization of Neural Networks
di: Saratchandran, Hemanth, et al.
Pubblicazione: (2024) -
From Activation to Initialization: Scaling Insights for Optimizing Neural Fields
di: Saratchandran, Hemanth, et al.
Pubblicazione: (2024)