Computing frustration and near-monotonicity in deep neural networks
Fuente:
arXiv
Salvato in:
| Autori principali: | Wendin, Joel, Larsson, Erik G., Altafini, Claudio |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Emergent weight morphologies in deep neural networks
di: de Jong, Pascal, et al.
Pubblicazione: (2025)
di: de Jong, Pascal, et al.
Pubblicazione: (2025)
Finite-time Lyapunov exponents of deep neural networks
di: Storm, L., et al.
Pubblicazione: (2023)
di: Storm, L., et al.
Pubblicazione: (2023)
Implicit bias produces neural scaling laws in learning curves, from perceptrons to deep networks
di: D'Amico, Francesco, et al.
Pubblicazione: (2025)
di: D'Amico, Francesco, et al.
Pubblicazione: (2025)
High-dimensional learning of narrow neural networks
di: Cui, Hugo
Pubblicazione: (2024)
di: Cui, Hugo
Pubblicazione: (2024)
Spring-block theory of feature learning in deep neural networks
di: Shi, Cheng, et al.
Pubblicazione: (2024)
di: Shi, Cheng, et al.
Pubblicazione: (2024)
Supervised and Unsupervised protocols for hetero-associative neural networks
di: Alessandrelli, Andrea, et al.
Pubblicazione: (2025)
di: Alessandrelli, Andrea, et al.
Pubblicazione: (2025)
Deep neural networks from the perspective of ergodic theory
di: Zhang, Fan
Pubblicazione: (2023)
di: Zhang, Fan
Pubblicazione: (2023)
Training neural networks with structured noise improves classification and generalization
di: Benedetti, Marco, et al.
Pubblicazione: (2023)
di: Benedetti, Marco, et al.
Pubblicazione: (2023)
How does training shape the Riemannian geometry of neural network representations?
di: Zavatone-Veth, Jacob A., et al.
Pubblicazione: (2023)
di: Zavatone-Veth, Jacob A., et al.
Pubblicazione: (2023)
Towards a theory of how the structure of language is acquired by deep neural networks
di: Cagnetta, Francesco, et al.
Pubblicazione: (2024)
di: Cagnetta, Francesco, et al.
Pubblicazione: (2024)
Adaptive kernel predictors from feature-learning infinite limits of neural networks
di: Lauditi, Clarissa, et al.
Pubblicazione: (2025)
di: Lauditi, Clarissa, et al.
Pubblicazione: (2025)
Boundary between noise and information applied to filtering neural network weight matrices
di: Staats, Max, et al.
Pubblicazione: (2022)
di: Staats, Max, et al.
Pubblicazione: (2022)
Dynamic neuron approach to deep neural networks: Decoupling neurons for renormalization group analysis
di: Lee, Donghee, et al.
Pubblicazione: (2024)
di: Lee, Donghee, et al.
Pubblicazione: (2024)
Universal characteristics of deep neural network loss surfaces from random matrix theory
di: Baskerville, Nicholas P, et al.
Pubblicazione: (2022)
di: Baskerville, Nicholas P, et al.
Pubblicazione: (2022)
Statistical physics analysis of graph neural networks: Approaching optimality in the contextual stochastic block model
di: Duranthon, O., et al.
Pubblicazione: (2025)
di: Duranthon, O., et al.
Pubblicazione: (2025)
Properties of the geometry of solutions and capacity of multi-layer neural networks with Rectified Linear Units activations
di: Baldassi, Carlo, et al.
Pubblicazione: (2019)
di: Baldassi, Carlo, et al.
Pubblicazione: (2019)
Weight fluctuations in (deep) linear neural networks and a derivation of the inverse-variance flatness relation
di: Gross, Markus, et al.
Pubblicazione: (2023)
di: Gross, Markus, et al.
Pubblicazione: (2023)
Solution space and storage capacity of fully connected two-layer neural networks with generic activation functions
di: Nishiyama, Sota, et al.
Pubblicazione: (2024)
di: Nishiyama, Sota, et al.
Pubblicazione: (2024)
Autoregressive model path dependence near Ising criticality
di: Teoh, Yi Hong, et al.
Pubblicazione: (2024)
di: Teoh, Yi Hong, et al.
Pubblicazione: (2024)
Sharp description of local minima in the loss landscape of high-dimensional two-layer ReLU neural networks
di: Huang, Jie, et al.
Pubblicazione: (2026)
di: Huang, Jie, et al.
Pubblicazione: (2026)
Fundamental limits of learning in sequence multi-index models and deep attention networks: High-dimensional asymptotics and sharp thresholds
di: Troiani, Emanuele, et al.
Pubblicazione: (2025)
di: Troiani, Emanuele, et al.
Pubblicazione: (2025)
Pruning-induced phases in fully-connected neural networks: the eumentia, the dementia, and the amentia
di: Pan, Haining, et al.
Pubblicazione: (2026)
di: Pan, Haining, et al.
Pubblicazione: (2026)
Critical feature learning in deep neural networks
di: Fischer, Kirsten, et al.
Pubblicazione: (2024)
di: Fischer, Kirsten, et al.
Pubblicazione: (2024)
Improving deep neural network performance through sampling
di: Ghantasala, Lakshmi A., et al.
Pubblicazione: (2025)
di: Ghantasala, Lakshmi A., et al.
Pubblicazione: (2025)
Applying statistical learning theory to deep learning
di: Gerbelot, Cédric, et al.
Pubblicazione: (2023)
di: Gerbelot, Cédric, et al.
Pubblicazione: (2023)
Statistical mechanics of extensive-width Bayesian neural networks near interpolation
di: Barbier, Jean, et al.
Pubblicazione: (2025)
di: Barbier, Jean, et al.
Pubblicazione: (2025)
Exact full-RSB SAT/UNSAT transition in infinitely wide two-layer neural networks
di: Annesi, Brandon L., et al.
Pubblicazione: (2024)
di: Annesi, Brandon L., et al.
Pubblicazione: (2024)
Glassy dynamics near the interpolation transition in deep recurrent networks
di: Hertz, John, et al.
Pubblicazione: (2024)
di: Hertz, John, et al.
Pubblicazione: (2024)
Arbitrage equilibrium and the emergence of universal microstructure in deep neural networks
di: Venkatasubramanian, Venkat, et al.
Pubblicazione: (2024)
di: Venkatasubramanian, Venkat, et al.
Pubblicazione: (2024)
DCEM: A deep complementary energy method for solid mechanics
di: Wang, Yizheng, et al.
Pubblicazione: (2023)
di: Wang, Yizheng, et al.
Pubblicazione: (2023)
Coding schemes in neural networks learning classification tasks
di: van Meegen, Alexander, et al.
Pubblicazione: (2024)
di: van Meegen, Alexander, et al.
Pubblicazione: (2024)
New non-Euclidean neural quantum states from additional types of hyperbolic recurrent neural networks
di: Dao, H. L.
Pubblicazione: (2026)
di: Dao, H. L.
Pubblicazione: (2026)
A simple theory for training response of deep neural networks
di: Nakazato, Kenichi
Pubblicazione: (2024)
di: Nakazato, Kenichi
Pubblicazione: (2024)
Opening the Black Box: predicting the trainability of deep neural networks with reconstruction entropy
di: Thurn, Yanick, et al.
Pubblicazione: (2024)
di: Thurn, Yanick, et al.
Pubblicazione: (2024)
Renormalization group for deep neural networks: Universality of learning and scaling laws
di: Coppola, Gorka Peraza, et al.
Pubblicazione: (2025)
di: Coppola, Gorka Peraza, et al.
Pubblicazione: (2025)
Optimal generalisation and learning transition in extensive-width shallow neural networks near interpolation
di: Barbier, Jean, et al.
Pubblicazione: (2025)
di: Barbier, Jean, et al.
Pubblicazione: (2025)
On the role of non-linear latent features in bipartite generative neural networks
di: Bonnaire, Tony, et al.
Pubblicazione: (2025)
di: Bonnaire, Tony, et al.
Pubblicazione: (2025)
What can we learn from quantum convolutional neural networks?
di: Umeano, Chukwudubem, et al.
Pubblicazione: (2023)
di: Umeano, Chukwudubem, et al.
Pubblicazione: (2023)
A universal approximation theorem for nonlinear resistive networks
di: Scellier, Benjamin, et al.
Pubblicazione: (2023)
di: Scellier, Benjamin, et al.
Pubblicazione: (2023)
Is Grokking a Computational Glass Relaxation?
di: Zhang, Xiaotian, et al.
Pubblicazione: (2025)
di: Zhang, Xiaotian, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Emergent weight morphologies in deep neural networks
di: de Jong, Pascal, et al.
Pubblicazione: (2025) -
Finite-time Lyapunov exponents of deep neural networks
di: Storm, L., et al.
Pubblicazione: (2023) -
Implicit bias produces neural scaling laws in learning curves, from perceptrons to deep networks
di: D'Amico, Francesco, et al.
Pubblicazione: (2025) -
High-dimensional learning of narrow neural networks
di: Cui, Hugo
Pubblicazione: (2024) -
Spring-block theory of feature learning in deep neural networks
di: Shi, Cheng, et al.
Pubblicazione: (2024)