Buchumschlag

EquiformerV2: Improved Equivariant Transformer for Scaling to Higher-Degree Representations

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Liao, Yi-Lun, Wood, Brandon, Das, Abhishek, Smidt, Tess
Format:	Preprint
Veröffentlicht:	2023
Schlagworte:	Machine Learning Artificial Intelligence Computational Physics
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

EquiformerV3: Scaling Efficient, Expressive, and General SE(3)-Equivariant Graph Attention Transformers
von: Liao, Yi-Lun, et al.
Veröffentlicht: (2026)

Generalizing Denoising to Non-Equilibrium Structures Improves Equivariant Force Fields
von: Liao, Yi-Lun, et al.
Veröffentlicht: (2024)

Equivariant Symmetry Breaking Sets
von: Xie, YuQing, et al.
Veröffentlicht: (2024)

A Tale of Two Symmetries: Exploring the Loss Landscape of Equivariant Models
von: Xie, YuQing, et al.
Veröffentlicht: (2025)

The Price of Freedom: Exploring Expressivity and Runtime Tradeoffs in Equivariant Tensor Products
von: Xie, YuQing, et al.
Veröffentlicht: (2025)

Adapting OC20-trained EquiformerV2 Models for High-Entropy Materials
von: Clausen, Christian M., et al.
Veröffentlicht: (2024)

Discovering Symmetry Breaking in Physical Systems with Relaxed Group Convolution
von: Wang, Rui, et al.
Veröffentlicht: (2023)

Geometric Representation Condition Improves Equivariant Molecule Generation
von: Li, Zian, et al.
Veröffentlicht: (2024)

BiScale-GTR: Fragment-Aware Graph Transformers for Multi-Scale Molecular Representation Learning
von: Yang, Yi, et al.
Veröffentlicht: (2026)

Relaxed Equivariant Graph Neural Networks
von: Hofgard, Elyssa, et al.
Veröffentlicht: (2024)

Equivariant Graph Network Approximations of High-Degree Polynomials for Force Field Prediction
von: Xu, Zhao, et al.
Veröffentlicht: (2024)

Contrastive Learning Via Equivariant Representation
von: Song, Sifan, et al.
Veröffentlicht: (2024)

Self-supervised Transformation Learning for Equivariant Representations
von: Yu, Jaemyung, et al.
Veröffentlicht: (2025)

Equivariant Spherical Transformer for Efficient Molecular Modeling
von: An, Junyi, et al.
Veröffentlicht: (2025)

Equivariant Masked Position Prediction for Efficient Molecular Representation
von: An, Junyi, et al.
Veröffentlicht: (2025)

E2Former-V2: On-the-Fly Equivariant Attention with Linear Activation Memory
von: Huang, Lin, et al.
Veröffentlicht: (2026)

Graph Neural Networks for Learning Equivariant Representations of Neural Networks
von: Kofinas, Miltiadis, et al.
Veröffentlicht: (2024)

Revisiting Multi-Permutation Equivariance through the Lens of Irreducible Representations
von: Sverdlov, Yonatan, et al.
Veröffentlicht: (2024)

Symphony: Symmetry-Equivariant Point-Centered Spherical Harmonics for 3D Molecule Generation
von: Daigavane, Ameya, et al.
Veröffentlicht: (2023)

All-atom Diffusion Transformers: Unified generative modelling of molecules and materials
von: Joshi, Chaitanya K., et al.
Veröffentlicht: (2025)

Representational Homomorphism Predicts and Improves Compositional Generalization In Transformer Language Model
von: An, Zhiyu, et al.
Veröffentlicht: (2026)

Learning Disentangled Equivariant Representation for Explicitly Controllable 3D Molecule Generation
von: Liu, Haoran, et al.
Veröffentlicht: (2024)

Euclidean, Projective, Conformal: Choosing a Geometric Algebra for Equivariant Transformers
von: de Haan, Pim, et al.
Veröffentlicht: (2023)

Spacetime $E(n)$-Transformer: Equivariant Attention for Spatio-temporal Graphs
von: Charles, Sergio G.
Veröffentlicht: (2024)

PhysioWave: A Multi-Scale Wavelet-Transformer for Physiological Signal Representation
von: Chen, Yanlong, et al.
Veröffentlicht: (2025)

CataLiUst Ti2C-MXene Trained EquiformerV2
von: Melnyk, Pavlo, et al.
Veröffentlicht: (2025)

FA-INR: Adaptive Implicit Neural Representations for Interpretable Exploration of Simulation Ensembles
von: Li, Ziwei, et al.
Veröffentlicht: (2025)

Multiple Invertible and Partial-Equivariant Function for Latent Vector Transformation to Enhance Disentanglement in VAEs
von: Jung, Hee-Jun, et al.
Veröffentlicht: (2025)

Scale-Translation Equivariant Network for Oceanic Internal Solitary Wave Localization
von: Wan, Zhang, et al.
Veröffentlicht: (2024)

Mitigating Degree Bias in Graph Representation Learning with Learnable Structural Augmentation and Structural Self-Attention
von: Hoang, Van Thuy, et al.
Veröffentlicht: (2025)

Higher-Order Transformers With Kronecker-Structured Attention
von: Omranpour, Soroush, et al.
Veröffentlicht: (2024)

LengthLogD: A Length-Stratified Ensemble Framework for Enhanced Peptide Lipophilicity Prediction via Multi-Scale Feature Integration
von: Wu, Shuang, et al.
Veröffentlicht: (2025)

The Spectral Lifecycle of Transformer Training: Transient Compression Waves, Persistent Spectral Gradients, and the Q/K--V Asymmetry
von: Liu, Yi
Veröffentlicht: (2026)

Introspective X Training: Feedback Conditioning Improves Scaling Across all LLM Training Stages
von: Cui, Brandon, et al.
Veröffentlicht: (2026)

Transformers from Compressed Representations
von: Alcazar, Juan C. Leon, et al.
Veröffentlicht: (2025)

Beyond Fluency: Toward Reliable Trajectories in Agentic IR
von: Sinha, Anushree, et al.
Veröffentlicht: (2026)

InSTA: Towards Internet-Scale Training For Agents
von: Trabucco, Brandon, et al.
Veröffentlicht: (2025)

DuSEGO: Dual Second-order Equivariant Graph Ordinary Differential Equation
von: Wang, Yingxu, et al.
Veröffentlicht: (2024)

Magnitude-Modulated Equivariant Adapter for Parameter-Efficient Fine-Tuning of Equivariant Graph Neural Networks
von: Jin, Dian, et al.
Veröffentlicht: (2025)

Understanding Scaling Laws with Statistical and Approximation Theory for Transformer Neural Networks on Intrinsically Low-dimensional Data
von: Havrilla, Alex, et al.
Veröffentlicht: (2024)