NOBLE: Accelerating Transformers with Nonlinear Low-Rank Branches
Fuente:
arXiv
Salvato in:
| Autore principale: | Smith, Ethan |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2026
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Understanding Textual Emotion Through Emoji Prediction
di: Gordon, Ethan, et al.
Pubblicazione: (2025)
di: Gordon, Ethan, et al.
Pubblicazione: (2025)
GLU Attention Improve Transformer
di: Wang, Zehao
Pubblicazione: (2025)
di: Wang, Zehao
Pubblicazione: (2025)
Accelerating Training Speed of Tiny Recursive Models with Curriculum Guided Adaptive Recursion
di: Qasim, Kaleem Ullah, et al.
Pubblicazione: (2025)
di: Qasim, Kaleem Ullah, et al.
Pubblicazione: (2025)
A Transformer-based Neural Architecture Search Method
di: Wang, Shang, et al.
Pubblicazione: (2025)
di: Wang, Shang, et al.
Pubblicazione: (2025)
Leave No Context Behind: Efficient Infinite Context Transformers with Infini-attention
di: Munkhdalai, Tsendsuren, et al.
Pubblicazione: (2024)
di: Munkhdalai, Tsendsuren, et al.
Pubblicazione: (2024)
Position as Probability: Self-Supervised Transformers that Think Past Their Training for Length Extrapolation
di: Lee, Philip Heejun
Pubblicazione: (2025)
di: Lee, Philip Heejun
Pubblicazione: (2025)
LANCE: Low Rank Activation Compression for Efficient On-Device Continual Learning
di: Apolinario, Marco Paul E., et al.
Pubblicazione: (2025)
di: Apolinario, Marco Paul E., et al.
Pubblicazione: (2025)
Gradient-Free Training of Spiking Neural Networks via Low-Rank Evolution Strategies
di: Patankar, Dhruv, et al.
Pubblicazione: (2026)
di: Patankar, Dhruv, et al.
Pubblicazione: (2026)
A Gauge Theory of Superposition: Toward a Sheaf-Theoretic Atlas of Neural Representations
di: Javidnia, Hossein
Pubblicazione: (2026)
di: Javidnia, Hossein
Pubblicazione: (2026)
Semantic Sections: An Atlas-Native Feature Ontology for Obstructed Representation Spaces
di: Javidnia, Hossein
Pubblicazione: (2026)
di: Javidnia, Hossein
Pubblicazione: (2026)
H-Node Attack and Defense in Large Language Models
di: Yocam, Eric, et al.
Pubblicazione: (2026)
di: Yocam, Eric, et al.
Pubblicazione: (2026)
Parameter-Efficient Fine-Tuning of LLMs with Mixture of Space Experts
di: Zhang, Buze, et al.
Pubblicazione: (2026)
di: Zhang, Buze, et al.
Pubblicazione: (2026)
Compute Allocation in Evolutionary Search: From Depth-Breadth to Multi-Armed Bandits
di: Xing, Sixue, et al.
Pubblicazione: (2026)
di: Xing, Sixue, et al.
Pubblicazione: (2026)
Vector Policy Optimization: Training for Diversity Improves Test-Time Search
di: Bahlous-Boldi, Ryan, et al.
Pubblicazione: (2026)
di: Bahlous-Boldi, Ryan, et al.
Pubblicazione: (2026)
MAR: Efficient Large Language Models via Module-aware Architecture Refinement
di: Cai, Junhong, et al.
Pubblicazione: (2026)
di: Cai, Junhong, et al.
Pubblicazione: (2026)
Diffusion Language Models for Speech Recognition
di: Naveriani, Davyd, et al.
Pubblicazione: (2026)
di: Naveriani, Davyd, et al.
Pubblicazione: (2026)
Selective Synchronization Attention
di: Hays, Hasi
Pubblicazione: (2026)
di: Hays, Hasi
Pubblicazione: (2026)
AgenticGEO: A Self-Evolving Agentic System for Generative Engine Optimization
di: Yuan, Jiaqi, et al.
Pubblicazione: (2026)
di: Yuan, Jiaqi, et al.
Pubblicazione: (2026)
Solve the Loop: Attractor Models for Language and Reasoning
di: Fein-Ashley, Jacob, et al.
Pubblicazione: (2026)
di: Fein-Ashley, Jacob, et al.
Pubblicazione: (2026)
Why Fine-Tuning Encourages Hallucinations and How to Fix It
di: Kaplan, Guy, et al.
Pubblicazione: (2026)
di: Kaplan, Guy, et al.
Pubblicazione: (2026)
Towards Foundation Models for Consensus Rank Aggregation
di: Jin, Yijun, et al.
Pubblicazione: (2026)
di: Jin, Yijun, et al.
Pubblicazione: (2026)
Interlocking-free Selective Rationalization Through Genetic-based Learning
di: Ruggeri, Federico, et al.
Pubblicazione: (2024)
di: Ruggeri, Federico, et al.
Pubblicazione: (2024)
CAPO: Cost-Aware Prompt Optimization
di: Zehle, Tom, et al.
Pubblicazione: (2025)
di: Zehle, Tom, et al.
Pubblicazione: (2025)
W-PCA Based Gradient-Free Proxy for Efficient Search of Lightweight Language Models
di: Wang, Shang
Pubblicazione: (2025)
di: Wang, Shang
Pubblicazione: (2025)
Evolutionary Multi-Objective Optimization of Large Language Model Prompts for Balancing Sentiments
di: Baumann, Jill, et al.
Pubblicazione: (2024)
di: Baumann, Jill, et al.
Pubblicazione: (2024)
Topic Modelling Black Box Optimization
di: Akramov, Roman, et al.
Pubblicazione: (2025)
di: Akramov, Roman, et al.
Pubblicazione: (2025)
Language Models Learn Universal Representations of Numbers and Here's Why You Should Care
di: Štefánik, Michal, et al.
Pubblicazione: (2025)
di: Štefánik, Michal, et al.
Pubblicazione: (2025)
EvoGPT-f: An Evolutionary GPT Framework for Benchmarking Formal Math Languages
di: Mercer, Johnathan
Pubblicazione: (2024)
di: Mercer, Johnathan
Pubblicazione: (2024)
Analysis of Error Sources in LLM-based Hypothesis Search for Few-Shot Rule Induction
di: Parab, Aishni, et al.
Pubblicazione: (2025)
di: Parab, Aishni, et al.
Pubblicazione: (2025)
Recent Advances in Federated Learning Driven Large Language Models: A Survey on Architecture, Performance, and Security
di: Qu, Youyang, et al.
Pubblicazione: (2024)
di: Qu, Youyang, et al.
Pubblicazione: (2024)
LLM-FE: Automated Feature Engineering for Tabular Data with LLMs as Evolutionary Optimizers
di: Abhyankar, Nikhil, et al.
Pubblicazione: (2025)
di: Abhyankar, Nikhil, et al.
Pubblicazione: (2025)
Benchmarking Randomized Optimization Algorithms on Binary, Permutation, and Combinatorial Problem Landscapes
di: Odeyemi, Jethro, et al.
Pubblicazione: (2025)
di: Odeyemi, Jethro, et al.
Pubblicazione: (2025)
Hyperbolic Fine-Tuning for Large Language Models
di: Yang, Menglin, et al.
Pubblicazione: (2024)
di: Yang, Menglin, et al.
Pubblicazione: (2024)
Fleet of Agents: Coordinated Problem Solving with Large Language Models
di: Klein, Lars, et al.
Pubblicazione: (2024)
di: Klein, Lars, et al.
Pubblicazione: (2024)
Assessing the Emergent Symbolic Reasoning Abilities of Llama Large Language Models
di: Petruzzellis, Flavio, et al.
Pubblicazione: (2024)
di: Petruzzellis, Flavio, et al.
Pubblicazione: (2024)
Elastic Architecture Search for Efficient Language Models
di: Wang, Shang
Pubblicazione: (2025)
di: Wang, Shang
Pubblicazione: (2025)
Large Language Models and Emergence: A Complex Systems Perspective
di: Krakauer, David C., et al.
Pubblicazione: (2025)
di: Krakauer, David C., et al.
Pubblicazione: (2025)
Enriching language models with graph-based context information to better understand textual data
di: Roethel, Albert, et al.
Pubblicazione: (2023)
di: Roethel, Albert, et al.
Pubblicazione: (2023)
Jailbreaking LLMs' Safeguard with Universal Magic Words for Text Embedding Models
di: Liang, Haoyu, et al.
Pubblicazione: (2025)
di: Liang, Haoyu, et al.
Pubblicazione: (2025)
Thoughtbubbles: an Unsupervised Method for Parallel Thinking in Latent Space
di: Liu, Houjun, et al.
Pubblicazione: (2025)
di: Liu, Houjun, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Understanding Textual Emotion Through Emoji Prediction
di: Gordon, Ethan, et al.
Pubblicazione: (2025) -
GLU Attention Improve Transformer
di: Wang, Zehao
Pubblicazione: (2025) -
Accelerating Training Speed of Tiny Recursive Models with Curriculum Guided Adaptive Recursion
di: Qasim, Kaleem Ullah, et al.
Pubblicazione: (2025) -
A Transformer-based Neural Architecture Search Method
di: Wang, Shang, et al.
Pubblicazione: (2025) -
Leave No Context Behind: Efficient Infinite Context Transformers with Infini-attention
di: Munkhdalai, Tsendsuren, et al.
Pubblicazione: (2024)