Buchumschlag

Multistability of Self-Attention Dynamics in Transformers

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
1. Verfasser:	Altafini, Claudio
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Machine Learning Systems and Control Dynamical Systems
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Gradient Flow Equations for Deep Linear Neural Networks: A Survey from a Network Perspective
von: Wendin, Joel, et al.
Veröffentlicht: (2025)

Minimal Input Cardinality Disturbance Decoupling of Coupled Oscillators via Output Feedback with Application to Power Networks
von: Lebon, Luca Claude Gino, et al.
Veröffentlicht: (2026)

The Asymptotic Behavior of Attention in Transformers
von: Abella, Álvaro Rodríguez, et al.
Veröffentlicht: (2024)

Learning Deep Dissipative Dynamics
von: Okamoto, Yuji, et al.
Veröffentlicht: (2024)

Joint Learning of Linear Time-Invariant Dynamical Systems
von: Modi, Aditya, et al.
Veröffentlicht: (2021)

Iterative Learning Control of Fast, Nonlinear, Oscillatory Dynamics (Preprint)
von: Brooks, John W., et al.
Veröffentlicht: (2024)

Safely Learning Dynamical Systems
von: Ahmadi, Amir Ali, et al.
Veröffentlicht: (2023)

Learning Dissipative Neural Dynamical Systems
von: Xu, Yuezhu, et al.
Veröffentlicht: (2023)

A Physics-informed Machine Learning-based Control Method for Nonlinear Dynamic Systems with Highly Noisy Measurements
von: Ma, Mason, et al.
Veröffentlicht: (2023)

Safe and Near-Optimal Control with Online Dynamics Learning
von: Prajapat, Manish, et al.
Veröffentlicht: (2025)

Online Optimization and Ambiguity-based Learning of Distributionally Uncertain Dynamic Systems
von: Li, Dan, et al.
Veröffentlicht: (2021)

Delay-adaptive Control of Nonlinear Systems with Approximate Neural Operator Predictors
von: Bhan, Luke, et al.
Veröffentlicht: (2025)

Structural System Identification via Validation and Adaptation
von: López, Cristian, et al.
Veröffentlicht: (2025)

Control of dynamical systems with neural networks
von: Böttcher, Lucas
Veröffentlicht: (2025)

Semi-Gradient SARSA Routing with Theoretical Guarantee on Traffic Stability and Weight Convergence
von: Wu, Yidan, et al.
Veröffentlicht: (2025)

Stabilization of nonlinear systems with unknown delays via delay-adaptive neural operator approximate predictors
von: Bhan, Luke, et al.
Veröffentlicht: (2025)

On Data-Driven Koopman Representations of Nonlinear Delay Differential Equations
von: Rajkumar, Santosh Mohan, et al.
Veröffentlicht: (2026)

Closed-Loop Koopman Operator Approximation
von: Dahdah, Steven, et al.
Veröffentlicht: (2023)

Stochastic Reinforcement Learning with Stability Guarantees for Control of Unknown Nonlinear Systems
von: Quartz, Thanin, et al.
Veröffentlicht: (2024)

Learning Koopman-based Stability Certificates for Unknown Nonlinear Systems
von: Zhou, Ruikun, et al.
Veröffentlicht: (2024)

Reservoir computing for system identification and predictive control with limited data
von: Williams, Jan P., et al.
Veröffentlicht: (2024)

Structure- and Stability-Preserving Learning of Port-Hamiltonian Systems
von: Nguyen, Binh, et al.
Veröffentlicht: (2026)

Controller Design for Structured State-space Models via Contraction Theory
von: Zakwan, Muhammad, et al.
Veröffentlicht: (2026)

Bilinear Input Modulation for Mamba: Koopman Bilinear Forms for Memory Retention and Multiplicative Computation
von: Fujii, Hiroki, et al.
Veröffentlicht: (2026)

Controlled oscillation modeling using port-Hamiltonian neural networks
von: Linares, Maximino, et al.
Veröffentlicht: (2026)

Uncertainty Modelling and Robust Observer Synthesis using the Koopman Operator
von: Dahdah, Steven, et al.
Veröffentlicht: (2024)

Koopman Kernel Regression
von: Bevanda, Petar, et al.
Veröffentlicht: (2023)

Identifying the nonlinear string dynamics with port-Hamiltonian neural networks
von: Linares, Maximino, et al.
Veröffentlicht: (2026)

Observability conditions for neural state-space models with eigenvalues and their roots of unity
von: Gracyk, Andrew
Veröffentlicht: (2025)

Safe and Robust Domains of Attraction for Discrete-Time Systems: A Set-Based Characterization and Certifiable Neural Network Estimation
von: Serry, Mohamed, et al.
Veröffentlicht: (2026)

SINDy-RL: Interpretable and Efficient Model-Based Reinforcement Learning
von: Zolman, Nicholas, et al.
Veröffentlicht: (2024)

Data-driven Nonlinear Model Reduction using Koopman Theory: Integrated Control Form and NMPC Case Study
von: Schulze, Jan C., et al.
Veröffentlicht: (2024)

Stability properties of gradient flow dynamics for the symmetric low-rank matrix factorization problem
von: Mohammadi, Hesameddin, et al.
Veröffentlicht: (2024)

Near-Optimal Distributed Linear-Quadratic Regulator for Networked Systems
von: Shin, Sungho, et al.
Veröffentlicht: (2022)

Tradeoffs between convergence rate and noise amplification for momentum-based accelerated optimization algorithms
von: Mohammadi, Hesameddin, et al.
Veröffentlicht: (2022)

From exponential to finite/fixed-time stability: Applications to optimization
von: Ozaslan, Ibrahim K., et al.
Veröffentlicht: (2024)

Neural Operators for Predictor Feedback Control of Nonlinear Delay Systems
von: Bhan, Luke, et al.
Veröffentlicht: (2024)

Identifiability of Differential-Algebraic Systems
von: Montanari, Arthur N., et al.
Veröffentlicht: (2024)

Nonlinear Model Order Reduction of Dynamical Systems in Process Engineering: Review and Comparison
von: Schulze, Jan C., et al.
Veröffentlicht: (2025)

Hybrid Energy-Based Models for Physical AI: Provably Stable Identification of Port-Hamiltonian Dynamics
von: Betteti, Simone, et al.
Veröffentlicht: (2026)