Residual connections provably mitigate oversmoothing in graph neural networks
Fuente:
arXiv
Salvato in:
| Autori principali: | Chen, Ziang, Lin, Zhengjiang, Chen, Shi, Polyanskiy, Yury, Rigollet, Philippe |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Quantitative Clustering in Mean-Field Transformer Models
di: Chen, Shi, et al.
Pubblicazione: (2025)
di: Chen, Shi, et al.
Pubblicazione: (2025)
Scaling Limits of Long-Context Transformers
di: Bruno, Giuseppe, et al.
Pubblicazione: (2026)
di: Bruno, Giuseppe, et al.
Pubblicazione: (2026)
The Mean-Field Dynamics of Transformers
di: Rigollet, Philippe
Pubblicazione: (2025)
di: Rigollet, Philippe
Pubblicazione: (2025)
Synchronization of mean-field models on the circle
di: Polyanskiy, Yury, et al.
Pubblicazione: (2025)
di: Polyanskiy, Yury, et al.
Pubblicazione: (2025)
A mathematical perspective on Transformers
di: Geshkovski, Borjan, et al.
Pubblicazione: (2023)
di: Geshkovski, Borjan, et al.
Pubblicazione: (2023)
Dynamic metastability in the self-attention model
di: Geshkovski, Borjan, et al.
Pubblicazione: (2024)
di: Geshkovski, Borjan, et al.
Pubblicazione: (2024)
Critical attention scaling in long-context transformers
di: Chen, Shi, et al.
Pubblicazione: (2025)
di: Chen, Shi, et al.
Pubblicazione: (2025)
Propagation of Chaos in Contextual Flow Maps
di: Chen, Shi, et al.
Pubblicazione: (2026)
di: Chen, Shi, et al.
Pubblicazione: (2026)
Clustering in Causal Attention Masking
di: Karagodin, Nikita, et al.
Pubblicazione: (2024)
di: Karagodin, Nikita, et al.
Pubblicazione: (2024)
Divergence-kernel method for linear responses of densities and generative models
di: Ni, Angxiu
Pubblicazione: (2025)
di: Ni, Angxiu
Pubblicazione: (2025)
When and how can inexact generative models still sample from the data manifold?
di: Chandramoorthy, Nisha, et al.
Pubblicazione: (2025)
di: Chandramoorthy, Nisha, et al.
Pubblicazione: (2025)
Geometric regularization of autoencoders via observed stochastic dynamics
di: Hill, Sean, et al.
Pubblicazione: (2026)
di: Hill, Sean, et al.
Pubblicazione: (2026)
The Minary Primitive of Computational Autopoiesis
di: Connor, Daniel, et al.
Pubblicazione: (2026)
di: Connor, Daniel, et al.
Pubblicazione: (2026)
Bridging discrete and continuous state spaces: Exploring the Ehrenfest process in time-continuous diffusion models
di: Winkler, Ludwig, et al.
Pubblicazione: (2024)
di: Winkler, Ludwig, et al.
Pubblicazione: (2024)
Random Quadratic Form on a Sphere: Synchronization by Common Noise
di: Engel, Maximilian, et al.
Pubblicazione: (2026)
di: Engel, Maximilian, et al.
Pubblicazione: (2026)
A Score Filter Enhanced Data Assimilation Framework for Data-Driven Dynamical Systems
di: Tang, Jingqiao, et al.
Pubblicazione: (2026)
di: Tang, Jingqiao, et al.
Pubblicazione: (2026)
Characterizing Dynamical Stability of Stochastic Gradient Descent in Overparameterized Learning
di: Chemnitz, Dennis, et al.
Pubblicazione: (2024)
di: Chemnitz, Dennis, et al.
Pubblicazione: (2024)
Optimal Initialization in Depth: Lyapunov Initialization and Limit Theorems for Deep Leaky ReLU Networks
di: Kogler, Constantin, et al.
Pubblicazione: (2026)
di: Kogler, Constantin, et al.
Pubblicazione: (2026)
Data-driven model discovery with Kolmogorov-Arnold networks
di: Moradi, Mohammadamin, et al.
Pubblicazione: (2024)
di: Moradi, Mohammadamin, et al.
Pubblicazione: (2024)
Leveraging chaotic transients in the training of artificial neural networks
di: Jiménez-González, Pedro, et al.
Pubblicazione: (2025)
di: Jiménez-González, Pedro, et al.
Pubblicazione: (2025)
Fractional neural attention for efficient multiscale sequence processing
di: Qu, Cheng Kevin, et al.
Pubblicazione: (2025)
di: Qu, Cheng Kevin, et al.
Pubblicazione: (2025)
Minimum Reduced-Order Models via Causal Inference
di: Chen, Nan, et al.
Pubblicazione: (2024)
di: Chen, Nan, et al.
Pubblicazione: (2024)
Dynamical stability and chaos in artificial neural network trajectories along training
di: Danovski, Kaloyan, et al.
Pubblicazione: (2024)
di: Danovski, Kaloyan, et al.
Pubblicazione: (2024)
Similarity Learning with neural networks
di: Sanfins, Gabriel, et al.
Pubblicazione: (2024)
di: Sanfins, Gabriel, et al.
Pubblicazione: (2024)
Decomposing heterogeneous dynamical systems with graph neural networks
di: Allier, Cédric, et al.
Pubblicazione: (2024)
di: Allier, Cédric, et al.
Pubblicazione: (2024)
Lagrangian neural ODEs: Measuring the existence of a Lagrangian with Helmholtz metrics
di: Wolf, Luca, et al.
Pubblicazione: (2025)
di: Wolf, Luca, et al.
Pubblicazione: (2025)
Homogenized Transformers
di: Koubbi, Hugo, et al.
Pubblicazione: (2026)
di: Koubbi, Hugo, et al.
Pubblicazione: (2026)
YuriiFormer: A Suite of Nesterov-Accelerated Transformers
di: Zimin, Aleksandr, et al.
Pubblicazione: (2026)
di: Zimin, Aleksandr, et al.
Pubblicazione: (2026)
How to Tame Your LLM: Semantic Collapse in Continuous Systems
di: Wyss, C. M.
Pubblicazione: (2025)
di: Wyss, C. M.
Pubblicazione: (2025)
Data-driven approximation of transfer operators for mean-field stochastic differential equations
di: Ioannou, Eirini, et al.
Pubblicazione: (2025)
di: Ioannou, Eirini, et al.
Pubblicazione: (2025)
A Dynamics-Informed Gaussian Process Framework for 2D Stochastic Navier-Stokes via Quasi-Gaussianity
di: Hamzi, Boumediene, et al.
Pubblicazione: (2025)
di: Hamzi, Boumediene, et al.
Pubblicazione: (2025)
Learning Chaotic Systems and Long-Term Predictions with Neural Jump ODEs
di: Krach, Florian, et al.
Pubblicazione: (2024)
di: Krach, Florian, et al.
Pubblicazione: (2024)
Evaluating the design space of diffusion-based generative models
di: Wang, Yuqing, et al.
Pubblicazione: (2024)
di: Wang, Yuqing, et al.
Pubblicazione: (2024)
Dynamical Measure Transport and Neural PDE Solvers for Sampling
di: Sun, Jingtong, et al.
Pubblicazione: (2024)
di: Sun, Jingtong, et al.
Pubblicazione: (2024)
Invariant Measures for Data-Driven Dynamical System Identification: Analysis and Application
di: Botvinick-Greenhouse, Jonah
Pubblicazione: (2025)
di: Botvinick-Greenhouse, Jonah
Pubblicazione: (2025)
Bayesian Transfer Operators in Reproducing Kernel Hilbert Spaces
di: Boshoff, Septimus, et al.
Pubblicazione: (2025)
di: Boshoff, Septimus, et al.
Pubblicazione: (2025)
A scalable generative model for dynamical system reconstruction from neuroimaging data
di: Volkmann, Eric, et al.
Pubblicazione: (2024)
di: Volkmann, Eric, et al.
Pubblicazione: (2024)
Tree-based Learning for High-Fidelity Prediction of Chaos
di: Giammarese, Adam, et al.
Pubblicazione: (2024)
di: Giammarese, Adam, et al.
Pubblicazione: (2024)
Control of dynamical systems with neural networks
di: Böttcher, Lucas
Pubblicazione: (2025)
di: Böttcher, Lucas
Pubblicazione: (2025)
Randomized coordinate gradient descent almost surely escapes strict saddle points
di: Chen, Ziang, et al.
Pubblicazione: (2025)
di: Chen, Ziang, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Quantitative Clustering in Mean-Field Transformer Models
di: Chen, Shi, et al.
Pubblicazione: (2025) -
Scaling Limits of Long-Context Transformers
di: Bruno, Giuseppe, et al.
Pubblicazione: (2026) -
The Mean-Field Dynamics of Transformers
di: Rigollet, Philippe
Pubblicazione: (2025) -
Synchronization of mean-field models on the circle
di: Polyanskiy, Yury, et al.
Pubblicazione: (2025) -
A mathematical perspective on Transformers
di: Geshkovski, Borjan, et al.
Pubblicazione: (2023)