Buchumschlag

Continual Learning in Modern Hopfield Networks with an Application to Diffusion Models

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Takeda, Ken, Oizumi, Masafumi, Karakida, Ryo
Format:	Preprint
Veröffentlicht:	2026
Schlagworte:	Machine Learning
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Modern Hopfield Networks with Continuous-Time Memories
von: Santos, Saul, et al.
Veröffentlicht: (2025)

Understanding MLP-Mixer as a Wide and Sparse MLP
von: Hayase, Tomohiro, et al.
Veröffentlicht: (2023)

On the Parameterization of Second-Order Optimization Effective Towards the Infinite Width
von: Ishikawa, Satoki, et al.
Veröffentlicht: (2023)

Self-attention Networks Localize When QK-eigenspectrum Concentrates
von: Bao, Han, et al.
Veröffentlicht: (2024)

Rectified Lagrangian for Out-of-Distribution Detection in Modern Hopfield Networks
von: Moriai, Ryo, et al.
Veröffentlicht: (2025)

The Impact of Anisotropic Covariance Structure on the Training Dynamics and Generalization Error of Linear Networks
von: Watanabe, Taishi, et al.
Veröffentlicht: (2026)

Optimal Layer Selection for Latent Data Augmentation
von: Takase, Tomoumi, et al.
Veröffentlicht: (2024)

Local Loss Optimization in the Infinite Width: Stable Parameterization of Predictive Coding Networks and Target Propagation
von: Ishikawa, Satoki, et al.
Veröffentlicht: (2024)

Infinite-Width Limit of a Single Attention Layer: Analysis via Tensor Programs
von: Sakai, Mana, et al.
Veröffentlicht: (2025)

Recurrent Self-Attention Dynamics: An Energy-Agnostic Perspective from Jacobians
von: Tomihari, Akiyoshi, et al.
Veröffentlicht: (2025)

Gaussian Equivalence for Self-Attention: Asymptotic Spectral Analysis of Attention Matrix
von: Hayase, Tomohiro, et al.
Veröffentlicht: (2025)

Nonparametric Modern Hopfield Models
von: Hu, Jerry Yao-Chieh, et al.
Veröffentlicht: (2024)

Geometry-Aware Attention Guidance for Diffusion Models via Modern Hopfield Dynamics
von: Kim, Kwanyoung
Veröffentlicht: (2026)

On the Role of Hidden States of Modern Hopfield Network in Transformer
von: Masumura, Tsubasa, et al.
Veröffentlicht: (2025)

A Unified Framework for Critical Scaling of Inverse Temperature in Self-Attention
von: Hayase, Tomohiro, et al.
Veröffentlicht: (2026)

Investigating Fine- and Coarse-grained Structural Correspondences Between Deep Neural Networks and Human Object Image Similarity Judgments Using Unsupervised Alignment
von: Takahashi, Soh, et al.
Veröffentlicht: (2025)

Uniform Memory Retrieval with Larger Capacity for Modern Hopfield Models
von: Wu, Dennis, et al.
Veröffentlicht: (2024)

A Framework for Non-Linear Attention via Modern Hopfield Networks
von: Farooq, Ahmed
Veröffentlicht: (2025)

Hierarchical Associative Memory, Parallelized MLP-Mixer, and Symmetry Breaking
von: Karakida, Ryo, et al.
Veröffentlicht: (2024)

Sparse and Structured Hopfield Networks
von: Santos, Saul, et al.
Veröffentlicht: (2024)

Modern Hopfield Networks meet Encoded Neural Representations -- Addressing Practical Considerations
von: Kashyap, Satyananda, et al.
Veröffentlicht: (2024)

On Computational Limits of Modern Hopfield Models: A Fine-Grained Complexity Analysis
von: Hu, Jerry Yao-Chieh, et al.
Veröffentlicht: (2024)

BiSHop: Bi-Directional Cellular Learning for Tabular Data with Generalized Sparse Modern Hopfield Model
von: Xu, Chenwei, et al.
Veröffentlicht: (2024)

Stochastic Attention via Langevin Dynamics on the Modern Hopfield Energy
von: Alswaidan, Abdulrahman, et al.
Veröffentlicht: (2026)

Improving Out-of-Distribution Data Handling and Corruption Resistance via Modern Hopfield Networks
von: Sargolzaei, Saleh, et al.
Veröffentlicht: (2024)

Hopfield Networks for Asset Allocation
von: Nicolini, Carlo, et al.
Veröffentlicht: (2024)

Adaptive Hopfield Network: Rethinking Similarities in Associative Memory
von: Wang, Shurong, et al.
Veröffentlicht: (2025)

TSPDiffuser: Diffusion Models as Learned Samplers for Traveling Salesperson Path Planning Problems
von: Yonetani, Ryo
Veröffentlicht: (2024)

Kernel Logistic Regression Learning for High-Capacity Hopfield Networks
von: Tamamori, Akira
Veröffentlicht: (2025)

Formalized Hopfield Networks and Boltzmann Machines
von: Cipollina, Matteo, et al.
Veröffentlicht: (2025)

Modern Hopfield Networks Require Chain-of-Thought to Solve $\mathsf{NC}^1$-Hard Problems
von: Cao, Yang, et al.
Veröffentlicht: (2024)

Prototype Analysis in Hopfield Networks with Hebbian Learning
von: McAlister, Hayden, et al.
Veröffentlicht: (2024)

Beyond Fixed Points: Superpolynomial Capacity of Asymmetric Hopfield Networks
von: Kumar, Aakash, et al.
Veröffentlicht: (2026)

Neural Pathways to Program Success: Hopfield Networks for PERT Analysis
von: Ahamed, Azgar Ali Noor
Veröffentlicht: (2025)

Vision Hopfield Memory Networks
von: Wang, Jianfeng, et al.
Veröffentlicht: (2026)

Kernel Ridge Regression for Efficient Learning of High-Capacity Hopfield Networks
von: Tamamori, Akira
Veröffentlicht: (2025)

Balancing Fidelity and Diversity in Diffusion Models via Symmetric Attention Decomposition: Hopfield Perspective
von: Cho, Hyunmin, et al.
Veröffentlicht: (2026)

Hopfield-Fenchel-Young Networks: A Unified Framework for Associative Memory Retrieval
von: Santos, Saul, et al.
Veröffentlicht: (2024)

Dynamic Manifold Hopfield Networks for Context-Dependent Associative Memory
von: Li, Chong, et al.
Veröffentlicht: (2025)

Provably Optimal Memory Capacity for Modern Hopfield Models: Transformer-Compatible Dense Associative Memories as Spherical Codes
von: Hu, Jerry Yao-Chieh, et al.
Veröffentlicht: (2024)