CTR-LoRA: Curvature-Aware and Trust-Region Guided Low-Rank Adaptation for Large Language Models
Fuente:
arXiv
Salvato in:
| Autori principali: | Wang, Zhuxuanzi, Mo, Mingqiao, Xiao, Xi, Liu, Chen, Ma, Chenrui, Zhang, Yunbei, Wang, Xiao, Krishnaswamy, Smita, Wang, Tianyang |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Self-Supervised Visual Prompting for Cross-Domain Road Damage Detection
di: Xiao, Xi, et al.
Pubblicazione: (2025)
di: Xiao, Xi, et al.
Pubblicazione: (2025)
Not All Directions Matter: Towards Structured and Task-Aware Low-Rank Model Adaptation
di: Xiao, Xi, et al.
Pubblicazione: (2026)
di: Xiao, Xi, et al.
Pubblicazione: (2026)
LoRA-GA: Low-Rank Adaptation with Gradient Approximation
di: Wang, Shaowen, et al.
Pubblicazione: (2024)
di: Wang, Shaowen, et al.
Pubblicazione: (2024)
LoRA+: Efficient Low Rank Adaptation of Large Models
di: Hayou, Soufiane, et al.
Pubblicazione: (2024)
di: Hayou, Soufiane, et al.
Pubblicazione: (2024)
Sensitivity-LoRA: Low-Load Sensitivity-Based Fine-Tuning for Large Language Models
di: Zhang, Hao, et al.
Pubblicazione: (2025)
di: Zhang, Hao, et al.
Pubblicazione: (2025)
MTL-LoRA: Low-Rank Adaptation for Multi-Task Learning
di: Yang, Yaming, et al.
Pubblicazione: (2024)
di: Yang, Yaming, et al.
Pubblicazione: (2024)
HyperAdaLoRA: Accelerating LoRA Rank Allocation During Training via Hypernetworks without Sacrificing Performance
di: Zhang, Hao, et al.
Pubblicazione: (2025)
di: Zhang, Hao, et al.
Pubblicazione: (2025)
PeriodicLoRA: Breaking the Low-Rank Bottleneck in LoRA Optimization
di: Meng, Xiangdi, et al.
Pubblicazione: (2024)
di: Meng, Xiangdi, et al.
Pubblicazione: (2024)
Null-LoRA: Low-Rank Adaptation on Null Space
di: Zhang, Yi, et al.
Pubblicazione: (2025)
di: Zhang, Yi, et al.
Pubblicazione: (2025)
Bayesian-LoRA: Probabilistic Low-Rank Adaptation of Large Language Models
di: Lin, Moule, et al.
Pubblicazione: (2026)
di: Lin, Moule, et al.
Pubblicazione: (2026)
CAD-VAE: Leveraging Correlation-Aware Latents for Comprehensive Fair Disentanglement
di: Ma, Chenrui, et al.
Pubblicazione: (2025)
di: Ma, Chenrui, et al.
Pubblicazione: (2025)
C-LoRA: Contextual Low-Rank Adaptation for Uncertainty Estimation in Large Language Models
di: Rahmati, Amir Hossein, et al.
Pubblicazione: (2025)
di: Rahmati, Amir Hossein, et al.
Pubblicazione: (2025)
SD-LoRA: Scalable Decoupled Low-Rank Adaptation for Class Incremental Learning
di: Wu, Yichen, et al.
Pubblicazione: (2025)
di: Wu, Yichen, et al.
Pubblicazione: (2025)
LoRA-Pro: Are Low-Rank Adapters Properly Optimized?
di: Wang, Zhengbo, et al.
Pubblicazione: (2024)
di: Wang, Zhengbo, et al.
Pubblicazione: (2024)
Beyond Editing Pairs: Fine-Grained Instructional Image Editing via Multi-Scale Learnable Regions
di: Ma, Chenrui, et al.
Pubblicazione: (2025)
di: Ma, Chenrui, et al.
Pubblicazione: (2025)
Hierarchical LoRA MoE for Efficient CTR Model Scaling
di: Zeng, Zhichen, et al.
Pubblicazione: (2025)
di: Zeng, Zhichen, et al.
Pubblicazione: (2025)
Flat-LoRA: Low-Rank Adaptation over a Flat Loss Landscape
di: Li, Tao, et al.
Pubblicazione: (2024)
di: Li, Tao, et al.
Pubblicazione: (2024)
Stable-LoRA: Stabilizing Feature Learning of Low-Rank Adaptation
di: Wu, Yize, et al.
Pubblicazione: (2026)
di: Wu, Yize, et al.
Pubblicazione: (2026)
1LoRA: Summation Compression for Very Low-Rank Adaptation
di: Quercia, Alessio, et al.
Pubblicazione: (2025)
di: Quercia, Alessio, et al.
Pubblicazione: (2025)
AuroRA: Breaking Low-Rank Bottleneck of LoRA with Nonlinear Mapping
di: Dong, Haonan, et al.
Pubblicazione: (2025)
di: Dong, Haonan, et al.
Pubblicazione: (2025)
LoRA-DA: Data-Aware Initialization for Low-Rank Adaptation via Asymptotic Analysis
di: Zhang, Qingyue, et al.
Pubblicazione: (2025)
di: Zhang, Qingyue, et al.
Pubblicazione: (2025)
ID-LoRA: Efficient Low-Rank Adaptation Inspired by Matrix Interpolative Decomposition
di: Ma, Xindian, et al.
Pubblicazione: (2026)
di: Ma, Xindian, et al.
Pubblicazione: (2026)
C-LoRA: Continual Low-Rank Adaptation for Pre-trained Models
di: Zhang, Xin, et al.
Pubblicazione: (2025)
di: Zhang, Xin, et al.
Pubblicazione: (2025)
LoRA-XS: Low-Rank Adaptation with Extremely Small Number of Parameters
di: Bałazy, Klaudia, et al.
Pubblicazione: (2024)
di: Bałazy, Klaudia, et al.
Pubblicazione: (2024)
Bernoulli-LoRA: A Theoretical Framework for Randomized Low-Rank Adaptation
di: Sokolov, Igor, et al.
Pubblicazione: (2025)
di: Sokolov, Igor, et al.
Pubblicazione: (2025)
FM-LoRA: Factorized Low-Rank Meta-Prompting for Continual Learning
di: Yu, Xiaobing, et al.
Pubblicazione: (2025)
di: Yu, Xiaobing, et al.
Pubblicazione: (2025)
RST-LoRA: A Discourse-Aware Low-Rank Adaptation for Long Document Abstractive Summarization
di: Liu, Dongqi, et al.
Pubblicazione: (2024)
di: Liu, Dongqi, et al.
Pubblicazione: (2024)
A Lightweight Framework for Trigger-Guided LoRA-Based Self-Adaptation in LLMs
di: Wei, Jiacheng, et al.
Pubblicazione: (2025)
di: Wei, Jiacheng, et al.
Pubblicazione: (2025)
Curvature-Guided LoRA: Steering in the pretrained NTK subspace
di: Zheng, Frédéric, et al.
Pubblicazione: (2026)
di: Zheng, Frédéric, et al.
Pubblicazione: (2026)
DR-LoRA: Dynamic Rank LoRA for Fine-Tuning Mixture-of-Experts Models
di: Deng, Guanzhi, et al.
Pubblicazione: (2026)
di: Deng, Guanzhi, et al.
Pubblicazione: (2026)
Sub-Token Routing in LoRA for Adaptation and Query-Aware KV Compression
di: Jiang, Wei, et al.
Pubblicazione: (2026)
di: Jiang, Wei, et al.
Pubblicazione: (2026)
GuiLoMo: Allocating Expert Number and Rank for LoRA-MoE via Bilevel Optimization with GuidedSelection Vectors
di: Zhang, Hengyuan, et al.
Pubblicazione: (2025)
di: Zhang, Hengyuan, et al.
Pubblicazione: (2025)
ER-LoRA: Effective-Rank Guided Adaptation for Weather-Generalized Depth Estimation
di: Yan, Weilong, et al.
Pubblicazione: (2025)
di: Yan, Weilong, et al.
Pubblicazione: (2025)
LoRA-Edit: Controllable First-Frame-Guided Video Editing via Mask-Aware LoRA Fine-Tuning
di: Gao, Chenjian, et al.
Pubblicazione: (2025)
di: Gao, Chenjian, et al.
Pubblicazione: (2025)
TalkLoRA: Communication-Aware Mixture of Low-Rank Adaptation for Large Language Models
di: Mu, Lin, et al.
Pubblicazione: (2026)
di: Mu, Lin, et al.
Pubblicazione: (2026)
LoRA-MGPO: Mitigating Double Descent in Low-Rank Adaptation via Momentum-Guided Perturbation Optimization
di: Chang, Yupeng, et al.
Pubblicazione: (2025)
di: Chang, Yupeng, et al.
Pubblicazione: (2025)
LoRA-Flow: Dynamic LoRA Fusion for Large Language Models in Generative Tasks
di: Wang, Hanqing, et al.
Pubblicazione: (2024)
di: Wang, Hanqing, et al.
Pubblicazione: (2024)
Computational Limits of Low-Rank Adaptation (LoRA) Fine-Tuning for Transformer Models
di: Hu, Jerry Yao-Chieh, et al.
Pubblicazione: (2024)
di: Hu, Jerry Yao-Chieh, et al.
Pubblicazione: (2024)
HiP-LoRA: Budgeted Spectral Plasticity for Robust Low-Rank Adaptation
di: Chen, Lixian, et al.
Pubblicazione: (2026)
di: Chen, Lixian, et al.
Pubblicazione: (2026)
PC-LoRA: Low-Rank Adaptation for Progressive Model Compression with Knowledge Distillation
di: Hwang, Injoon, et al.
Pubblicazione: (2024)
di: Hwang, Injoon, et al.
Pubblicazione: (2024)
Documenti analoghi
-
Self-Supervised Visual Prompting for Cross-Domain Road Damage Detection
di: Xiao, Xi, et al.
Pubblicazione: (2025) -
Not All Directions Matter: Towards Structured and Task-Aware Low-Rank Model Adaptation
di: Xiao, Xi, et al.
Pubblicazione: (2026) -
LoRA-GA: Low-Rank Adaptation with Gradient Approximation
di: Wang, Shaowen, et al.
Pubblicazione: (2024) -
LoRA+: Efficient Low Rank Adaptation of Large Models
di: Hayou, Soufiane, et al.
Pubblicazione: (2024) -
Sensitivity-LoRA: Low-Load Sensitivity-Based Fine-Tuning for Large Language Models
di: Zhang, Hao, et al.
Pubblicazione: (2025)