Buchumschlag

Grokking vs. Learning: Same Features, Different Encodings

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Manning-Coe, Dmitry, Gliozzi, Jacopo, Stapleton, Alexander G., Hirst, Edward, De Tomasi, Giuseppe, Bradlyn, Barry, Berman, David S.
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Machine Learning Disordered Systems and Neural Networks Artificial Intelligence
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Non-Hermitian Multipole Skin Effects Challenge Localization
von: Gliozzi, Jacopo, et al.
Veröffentlicht: (2025)

Grokking in the Ising Model
von: Hutchison, Karolina, et al.
Veröffentlicht: (2025)

NCoder -- A Quantum Field Theory approach to encoding data
von: Berman, David S., et al.
Veröffentlicht: (2024)

Is Grokking a Computational Glass Relaxation?
von: Zhang, Xiaotian, et al.
Veröffentlicht: (2025)

Grokking as the Transition from Lazy to Rich Training Dynamics
von: Kumar, Tanishq, et al.
Veröffentlicht: (2023)

Grokking at the Edge of Linear Separability
von: Beck, Alon, et al.
Veröffentlicht: (2024)

Grokking as a First Order Phase Transition in Two Layer Networks
von: Rubin, Noa, et al.
Veröffentlicht: (2023)

Stable many-body localization under random continuous measurements in the no-click limit
von: De Tomasi, Giuseppe, et al.
Veröffentlicht: (2023)

Grokking in Linear Estimators -- A Solvable Model that Groks without Understanding
von: Levi, Noam, et al.
Veröffentlicht: (2023)

How Feature Learning Can Improve Neural Scaling Laws
von: Bordelon, Blake, et al.
Veröffentlicht: (2024)

Grokking Modular Polynomials
von: Doshi, Darshil, et al.
Veröffentlicht: (2024)

Scaling of Static and Dynamical Properties of Random Anisotropy Magnets
von: Garanin, Dmitry A., et al.
Veröffentlicht: (2024)

From Kernels to Features: A Multi-Scale Adaptive Theory of Feature Learning
von: Rubin, Noa, et al.
Veröffentlicht: (2025)

Semiclassical picture of the Heisenberg spin glass in two dimensions: from weak localization to hydrodynamics
von: Bracci-Testasecca, Giacomo, et al.
Veröffentlicht: (2026)

Renormalization-Group Analysis of the Many-Body Localization Transition in the Random-Field XXZ Chain
von: Niedda, Jacopo, et al.
Veröffentlicht: (2024)

The Training Process of Many Deep Networks Explores the Same Low-Dimensional Manifold
von: Mao, Jialin, et al.
Veröffentlicht: (2023)

Extreme Quantum Cognition Machines for Deliberative Decision Making
von: Romeo, Francesco, et al.
Veröffentlicht: (2026)

Universal Spin Models are Universal Approximators in Machine Learning
von: Reinhart, Tobias, et al.
Veröffentlicht: (2025)

Decomposing momentum scales in the Hubbard Model: From Hatsugai-Kohmoto to Aubry-André
von: Manning-Coe, Dmitry, et al.
Veröffentlicht: (2026)

Towards Worst-Case Guarantees with Scale-Aware Interpretability
von: Greenspan, Lauren, et al.
Veröffentlicht: (2026)

Transfer Learning in Infinite Width Feature Learning Networks
von: Lauditi, Clarissa, et al.
Veröffentlicht: (2025)

Probing marginal stability in the spherical $p=2$ model
von: Niedda, Jacopo, et al.
Veröffentlicht: (2024)

Intensity pseudo-localized phase in the glassy random laser
von: Niedda, Jacopo, et al.
Veröffentlicht: (2022)

Percolation thresholds and connectivity in quantum networks
von: De Girolamo, Andrea, et al.
Veröffentlicht: (2025)

Graph-Based Feature Engineering to Predict the Dynamical Properties of Condensed Matter
von: Wang, An, et al.
Veröffentlicht: (2024)

Measurement-induced phase transitions by matrix product states scaling
von: Cecile, Guillaume, et al.
Veröffentlicht: (2024)

Screening and localization in the nonlinear Anderson problem
von: Milovanov, Alexander V., et al.
Veröffentlicht: (2025)

Bayesian RG Flow in Neural Network Field Theories
von: Howard, Jessica N., et al.
Veröffentlicht: (2024)

Grokking as Dimensional Phase Transition in Neural Networks
von: Wang, Ping
Veröffentlicht: (2026)

Dimensional Criticality at Grokking Across MLPs and Transformers
von: Wang, Ping
Veröffentlicht: (2026)

Enhanced polariton interaction in the presence of disorder
von: Prest, Matthew, et al.
Veröffentlicht: (2025)

Scaling Laws and Representation Learning in Simple Hierarchical Languages: Transformers vs. Convolutional Architectures
von: Cagnetta, Francesco, et al.
Veröffentlicht: (2025)

The origin of anomalous non-linear microwave absorption in Josephson junction qubits: mysterious nature of two level systems or their dynamic interaction?
von: Burin, Alexander L.
Veröffentlicht: (2025)

The Low-Temperature Electronic Specific Heats of Disordered Ag-Au Alloys, Revisited
von: Hinojosa-Romero, David, et al.
Veröffentlicht: (2024)

Thermal Robustness of Retrieval in Dense Associative Memories: LSE vs LSR Kernels
von: Petrova, Tatiana
Veröffentlicht: (2026)

Deep Learning as Neural Low-Degree Filtering: A Spectral Theory of Hierarchical Feature Learning
von: Dandi, Yatin, et al.
Veröffentlicht: (2026)

Field theory for monitored Brownian SYK clusters
von: Tiutiakina, Anastasiia, et al.
Veröffentlicht: (2024)

BBP Phase Transition for an Extensive Number of Outliers
von: Forner, Niklas, et al.
Veröffentlicht: (2025)

Theory of Optimal Learning Rate Schedules and Scaling Laws for a Random Feature Model
von: Bordelon, Blake, et al.
Veröffentlicht: (2026)

Linking Network and Neuron-level Correlations by Renormalized Field Theory
von: Dick, Michael, et al.
Veröffentlicht: (2023)