ENA: Efficient N-dimensional Attention
Fuente:
arXiv
Enregistré dans:
| Auteur principal: | Zhong, Yibo |
|---|---|
| Format: | Preprint |
| Publié: |
2025
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
Generalized Neighborhood Attention: Multi-dimensional Sparse Attention at the Speed of Light
par: Hassani, Ali, et autres
Publié: (2025)
par: Hassani, Ali, et autres
Publié: (2025)
Efficient Image Generation with Variadic Attention Heads
par: Walton, Steven, et autres
Publié: (2022)
par: Walton, Steven, et autres
Publié: (2022)
PSA: Pyramid Sparse Attention for Efficient Video Understanding and Generation
par: Li, Xiaolong, et autres
Publié: (2025)
par: Li, Xiaolong, et autres
Publié: (2025)
Attention-space Contrastive Guidance for Efficient Hallucination Mitigation in LVLMs
par: Jo, Yujin, et autres
Publié: (2026)
par: Jo, Yujin, et autres
Publié: (2026)
COMCAT: Towards Efficient Compression and Customization of Attention-Based Vision Models
par: Xiao, Jinqi, et autres
Publié: (2023)
par: Xiao, Jinqi, et autres
Publié: (2023)
BLADE: Block-Sparse Attention Meets Step Distillation for Efficient Video Generation
par: Gu, Youping, et autres
Publié: (2025)
par: Gu, Youping, et autres
Publié: (2025)
Communication Efficient Split Learning of ViTs with Attention-based Double Compression
par: Alvetreti, Federico, et autres
Publié: (2025)
par: Alvetreti, Federico, et autres
Publié: (2025)
IBiT: Utilizing Inductive Biases to Create a More Data Efficient Attention Mechanism
par: Giri, Adithya
Publié: (2025)
par: Giri, Adithya
Publié: (2025)
SuperLoRA: Parameter-Efficient Unified Adaptation of Multi-Layer Attention Modules
par: Chen, Xiangyu, et autres
Publié: (2024)
par: Chen, Xiangyu, et autres
Publié: (2024)
Advanced Brain Tumor Segmentation Using EMCAD: Efficient Multi-scale Convolutional Attention Decoding
par: Uzor, GodsGift, et autres
Publié: (2025)
par: Uzor, GodsGift, et autres
Publié: (2025)
SpikeVideoFormer: An Efficient Spike-Driven Video Transformer with Hamming Attention and $\mathcal{O}(T)$ Complexity
par: Zou, Shihao, et autres
Publié: (2025)
par: Zou, Shihao, et autres
Publié: (2025)
MoH: Multi-Head Attention as Mixture-of-Head Attention
par: Jin, Peng, et autres
Publié: (2024)
par: Jin, Peng, et autres
Publié: (2024)
TP-Blend: Textual-Prompt Attention Pairing for Precise Object-Style Blending in Diffusion Models
par: Jin, Xin, et autres
Publié: (2026)
par: Jin, Xin, et autres
Publié: (2026)
CUE-Net: Violence Detection Video Analytics with Spatial Cropping, Enhanced UniformerV2 and Modified Efficient Additive Attention
par: Senadeera, Damith Chamalke, et autres
Publié: (2024)
par: Senadeera, Damith Chamalke, et autres
Publié: (2024)
Linear Attention with Global Context: A Multipole Attention Mechanism for Vision and Physics
par: Colagrande, Alex, et autres
Publié: (2025)
par: Colagrande, Alex, et autres
Publié: (2025)
FusionCell: Cross-Attentive Fusion of Layout Geometry and Netlist Topology for Standard-Cell Performance Prediction
par: Zhang, Haoyi, et autres
Publié: (2026)
par: Zhang, Haoyi, et autres
Publié: (2026)
Not All Attention Heads Are What You Need: Refining CLIP's Image Representation with Attention Ablation
par: Lin, Feng, et autres
Publié: (2025)
par: Lin, Feng, et autres
Publié: (2025)
Faster Neighborhood Attention: Reducing the O(n^2) Cost of Self Attention at the Threadblock Level
par: Hassani, Ali, et autres
Publié: (2024)
par: Hassani, Ali, et autres
Publié: (2024)
Enhancing Online Continual Learning with Plug-and-Play State Space Model and Class-Conditional Mixture of Discretization
par: Liu, Sihao, et autres
Publié: (2024)
par: Liu, Sihao, et autres
Publié: (2024)
SageAttention2++: A More Efficient Implementation of SageAttention2
par: Zhang, Jintao, et autres
Publié: (2025)
par: Zhang, Jintao, et autres
Publié: (2025)
Radial Attention: $O(n\log n)$ Sparse Attention with Energy Decay for Long Video Generation
par: Li, Xingyang, et autres
Publié: (2025)
par: Li, Xingyang, et autres
Publié: (2025)
Deep Attention-guided Adaptive Subsampling
par: Shankaranarayana, Sharath M, et autres
Publié: (2025)
par: Shankaranarayana, Sharath M, et autres
Publié: (2025)
Attention in Diffusion Model: A Survey
par: Hua, Litao, et autres
Publié: (2025)
par: Hua, Litao, et autres
Publié: (2025)
MAIS: Memory-Attention for Interactive Segmentation
par: Orbes-Arteaga, Mauricio, et autres
Publié: (2025)
par: Orbes-Arteaga, Mauricio, et autres
Publié: (2025)
Parameter Efficient Multi-Class Intelligent Scheduling for Multimodal Online Distributed Industrial Anomaly Detection
par: Wang, Heqiang, et autres
Publié: (2026)
par: Wang, Heqiang, et autres
Publié: (2026)
DiffCLIP: Differential Attention Meets CLIP
par: Hammoud, Hasan Abed Al Kader, et autres
Publié: (2025)
par: Hammoud, Hasan Abed Al Kader, et autres
Publié: (2025)
Shape-Guided Diffusion with Inside-Outside Attention
par: Park, Dong Huk, et autres
Publié: (2022)
par: Park, Dong Huk, et autres
Publié: (2022)
Motion meets Attention: Video Motion Prompts
par: Chen, Qixiang, et autres
Publié: (2024)
par: Chen, Qixiang, et autres
Publié: (2024)
Class-Discriminative Attention Maps for Vision Transformers
par: Brocki, Lennart, et autres
Publié: (2023)
par: Brocki, Lennart, et autres
Publié: (2023)
Scratching Visual Transformer's Back with Uniform Attention
par: Hyeon-Woo, Nam, et autres
Publié: (2022)
par: Hyeon-Woo, Nam, et autres
Publié: (2022)
BSA: Ball Sparse Attention for Large-scale Geometries
par: Brita, Catalin E., et autres
Publié: (2025)
par: Brita, Catalin E., et autres
Publié: (2025)
Dynamic Attention-Guided Diffusion for Image Super-Resolution
par: Moser, Brian B., et autres
Publié: (2023)
par: Moser, Brian B., et autres
Publié: (2023)
Precipitation Nowcasting Using Diffusion Transformer with Causal Attention
par: Li, ChaoRong, et autres
Publié: (2024)
par: Li, ChaoRong, et autres
Publié: (2024)
Self-Rectifying Diffusion Sampling with Perturbed-Attention Guidance
par: Ahn, Donghoon, et autres
Publié: (2024)
par: Ahn, Donghoon, et autres
Publié: (2024)
FasterViT: Fast Vision Transformers with Hierarchical Attention
par: Hatamizadeh, Ali, et autres
Publié: (2023)
par: Hatamizadeh, Ali, et autres
Publié: (2023)
AttentionDrop: A Novel Regularization Method for Transformer Models
par: Baig, Mirza Samad Ahmed, et autres
Publié: (2025)
par: Baig, Mirza Samad Ahmed, et autres
Publié: (2025)
VideoNSA: Native Sparse Attention Scales Video Understanding
par: Song, Enxin, et autres
Publié: (2025)
par: Song, Enxin, et autres
Publié: (2025)
TempoControl: Temporal Attention Guidance for Text-to-Video Models
par: Schiber, Shira, et autres
Publié: (2025)
par: Schiber, Shira, et autres
Publié: (2025)
FAR: Function-preserving Attention Replacement for IMC-friendly Inference
par: Ren, Yuxin, et autres
Publié: (2025)
par: Ren, Yuxin, et autres
Publié: (2025)
Masked Multi-Query Slot Attention for Unsupervised Object Discovery
par: Pramanik, Rishav, et autres
Publié: (2024)
par: Pramanik, Rishav, et autres
Publié: (2024)
Documents similaires
-
Generalized Neighborhood Attention: Multi-dimensional Sparse Attention at the Speed of Light
par: Hassani, Ali, et autres
Publié: (2025) -
Efficient Image Generation with Variadic Attention Heads
par: Walton, Steven, et autres
Publié: (2022) -
PSA: Pyramid Sparse Attention for Efficient Video Understanding and Generation
par: Li, Xiaolong, et autres
Publié: (2025) -
Attention-space Contrastive Guidance for Efficient Hallucination Mitigation in LVLMs
par: Jo, Yujin, et autres
Publié: (2026) -
COMCAT: Towards Efficient Compression and Customization of Attention-Based Vision Models
par: Xiao, Jinqi, et autres
Publié: (2023)