Critical feature learning in deep neural networks
Fuente:
arXiv
Salvato in:
| Autori principali: | Fischer, Kirsten, Lindner, Javed, Dahmen, David, Ringel, Zohar, Krämer, Michael, Helias, Moritz |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Lecture notes: From Gaussian processes to feature learning
di: Helias, Moritz, et al.
Pubblicazione: (2026)
di: Helias, Moritz, et al.
Pubblicazione: (2026)
Renormalization group for deep neural networks: Universality of learning and scaling laws
di: Coppola, Gorka Peraza, et al.
Pubblicazione: (2025)
di: Coppola, Gorka Peraza, et al.
Pubblicazione: (2025)
From Kernels to Features: A Multi-Scale Adaptive Theory of Feature Learning
di: Rubin, Noa, et al.
Pubblicazione: (2025)
di: Rubin, Noa, et al.
Pubblicazione: (2025)
Dynamics of neural scaling laws in random feature regression with powerlaw-distributed kernel eigenvalues
di: Kramp, Jakob, et al.
Pubblicazione: (2026)
di: Kramp, Jakob, et al.
Pubblicazione: (2026)
Field theory for optimal signal propagation in ResNets
di: Fischer, Kirsten, et al.
Pubblicazione: (2023)
di: Fischer, Kirsten, et al.
Pubblicazione: (2023)
A unified theory of feature learning in RNNs and DNNs
di: Bauer, Jan P., et al.
Pubblicazione: (2026)
di: Bauer, Jan P., et al.
Pubblicazione: (2026)
Effect of Synaptic Heterogeneity on Neuronal Coordination
di: Layer, Moritz, et al.
Pubblicazione: (2023)
di: Layer, Moritz, et al.
Pubblicazione: (2023)
Reduction of interaction order in hard combinatorial optimization via conditionally independent degrees of freedom
di: Ciobanu, Alexandru, et al.
Pubblicazione: (2025)
di: Ciobanu, Alexandru, et al.
Pubblicazione: (2025)
Applications of Statistical Field Theory in Deep Learning
di: Ringel, Zohar, et al.
Pubblicazione: (2025)
di: Ringel, Zohar, et al.
Pubblicazione: (2025)
Demystifying Spectral Bias on Real-World Data
di: Lavie, Itay, et al.
Pubblicazione: (2024)
di: Lavie, Itay, et al.
Pubblicazione: (2024)
Algorithmic Task Capture, Computational Complexity, and Inductive Bias of Infinite Transformers
di: Davidovich, Orit, et al.
Pubblicazione: (2026)
di: Davidovich, Orit, et al.
Pubblicazione: (2026)
Beyond-mean-field fluctuations for the solution of constraint satisfaction problems
di: Foos, Niklas, et al.
Pubblicazione: (2025)
di: Foos, Niklas, et al.
Pubblicazione: (2025)
Linking Network and Neuron-level Correlations by Renormalized Field Theory
di: Dick, Michael, et al.
Pubblicazione: (2023)
di: Dick, Michael, et al.
Pubblicazione: (2023)
Grokking as a First Order Phase Transition in Two Layer Networks
di: Rubin, Noa, et al.
Pubblicazione: (2023)
di: Rubin, Noa, et al.
Pubblicazione: (2023)
Optimizing p-spin models through hypergraph neural networks and deep reinforcement learning
di: Zeng, Li, et al.
Pubblicazione: (2026)
di: Zeng, Li, et al.
Pubblicazione: (2026)
Towards Understanding Inductive Bias in Transformers: A View From Infinity
di: Lavie, Itay, et al.
Pubblicazione: (2024)
di: Lavie, Itay, et al.
Pubblicazione: (2024)
Spring-block theory of feature learning in deep neural networks
di: Shi, Cheng, et al.
Pubblicazione: (2024)
di: Shi, Cheng, et al.
Pubblicazione: (2024)
Graph Neural Networks Do Not Always Oversmooth
di: Epping, Bastian, et al.
Pubblicazione: (2024)
di: Epping, Bastian, et al.
Pubblicazione: (2024)
Microscopic and collective signatures of feature learning in neural networks
di: Corti, Andrea, et al.
Pubblicazione: (2025)
di: Corti, Andrea, et al.
Pubblicazione: (2025)
Improving deep neural network performance through sampling
di: Ghantasala, Lakshmi A., et al.
Pubblicazione: (2025)
di: Ghantasala, Lakshmi A., et al.
Pubblicazione: (2025)
Arbitrage equilibrium and the emergence of universal microstructure in deep neural networks
di: Venkatasubramanian, Venkat, et al.
Pubblicazione: (2024)
di: Venkatasubramanian, Venkat, et al.
Pubblicazione: (2024)
Adaptive kernel predictors from feature-learning infinite limits of neural networks
di: Lauditi, Clarissa, et al.
Pubblicazione: (2025)
di: Lauditi, Clarissa, et al.
Pubblicazione: (2025)
Statistical physics through the lens of real-space mutual information
di: Gökmen, Doruk Efe, et al.
Pubblicazione: (2021)
di: Gökmen, Doruk Efe, et al.
Pubblicazione: (2021)
Topological mechanical neural networks as classifiers through in situ backpropagation learning
di: Li, Shuaifeng, et al.
Pubblicazione: (2025)
di: Li, Shuaifeng, et al.
Pubblicazione: (2025)
A statistical mechanics framework for Bayesian deep neural networks beyond the infinite-width limit
di: Pacelli, R., et al.
Pubblicazione: (2022)
di: Pacelli, R., et al.
Pubblicazione: (2022)
Emergent weight morphologies in deep neural networks
di: de Jong, Pascal, et al.
Pubblicazione: (2025)
di: de Jong, Pascal, et al.
Pubblicazione: (2025)
Implicit bias produces neural scaling laws in learning curves, from perceptrons to deep networks
di: D'Amico, Francesco, et al.
Pubblicazione: (2025)
di: D'Amico, Francesco, et al.
Pubblicazione: (2025)
Computing frustration and near-monotonicity in deep neural networks
di: Wendin, Joel, et al.
Pubblicazione: (2025)
di: Wendin, Joel, et al.
Pubblicazione: (2025)
Finite-time Lyapunov exponents of deep neural networks
di: Storm, L., et al.
Pubblicazione: (2023)
di: Storm, L., et al.
Pubblicazione: (2023)
Impact of heavy-tailed synaptic strength distributions on self-sustained activity in networks of spiking neurons
di: Tönjes, Ralf, et al.
Pubblicazione: (2026)
di: Tönjes, Ralf, et al.
Pubblicazione: (2026)
Generalized hetero-associative neural networks
di: Agliari, Elena, et al.
Pubblicazione: (2024)
di: Agliari, Elena, et al.
Pubblicazione: (2024)
Compression theory for inhomogeneous systems
di: Gökmen, Doruk Efe, et al.
Pubblicazione: (2023)
di: Gökmen, Doruk Efe, et al.
Pubblicazione: (2023)
High-dimensional learning of narrow neural networks
di: Cui, Hugo
Pubblicazione: (2024)
di: Cui, Hugo
Pubblicazione: (2024)
Identifying the impact of local connectivity patterns on dynamics in excitatory-inhibitory networks
di: Shao, Yuxiu, et al.
Pubblicazione: (2024)
di: Shao, Yuxiu, et al.
Pubblicazione: (2024)
Partial annealing and pattern decorrelation in associative neural networks
di: Albanese, Linda, et al.
Pubblicazione: (2026)
di: Albanese, Linda, et al.
Pubblicazione: (2026)
Instant prediction of relaxation in moiré superlattices using neural networks
di: Belonovskii, Aleksei V., et al.
Pubblicazione: (2025)
di: Belonovskii, Aleksei V., et al.
Pubblicazione: (2025)
Glassy dynamics near the interpolation transition in deep recurrent networks
di: Hertz, John, et al.
Pubblicazione: (2024)
di: Hertz, John, et al.
Pubblicazione: (2024)
Pattern Expansion of Spin Glasses
di: Shen, Mutian, et al.
Pubblicazione: (2026)
di: Shen, Mutian, et al.
Pubblicazione: (2026)
Application of deep neural networks for computing the renormalization group flow of the two-dimensional phi^4 field theory
di: Zhao, Yueqi, et al.
Pubblicazione: (2025)
di: Zhao, Yueqi, et al.
Pubblicazione: (2025)
Liquid and solid layers in a thermal deep learning machine
di: Huang, Gang, et al.
Pubblicazione: (2025)
di: Huang, Gang, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Lecture notes: From Gaussian processes to feature learning
di: Helias, Moritz, et al.
Pubblicazione: (2026) -
Renormalization group for deep neural networks: Universality of learning and scaling laws
di: Coppola, Gorka Peraza, et al.
Pubblicazione: (2025) -
From Kernels to Features: A Multi-Scale Adaptive Theory of Feature Learning
di: Rubin, Noa, et al.
Pubblicazione: (2025) -
Dynamics of neural scaling laws in random feature regression with powerlaw-distributed kernel eigenvalues
di: Kramp, Jakob, et al.
Pubblicazione: (2026) -
Field theory for optimal signal propagation in ResNets
di: Fischer, Kirsten, et al.
Pubblicazione: (2023)