Salvato in:
| Autore principale: | Golwala, Shreel |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2026
|
| Soggetti: | |
| Accesso online: | https://arxiv.org/abs/2604.20923 |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Tangma: A Tanh-Guided Activation Function with Learnable Parameters
di: Golwala, Shreel
Pubblicazione: (2025)
di: Golwala, Shreel
Pubblicazione: (2025)
GrokAlign: Geometric Characterisation and Acceleration of Grokking
di: Walker, Thomas, et al.
Pubblicazione: (2025)
di: Walker, Thomas, et al.
Pubblicazione: (2025)
To Grok Grokking: Provable Grokking in Ridge Regression
di: Xu, Mingyue, et al.
Pubblicazione: (2026)
di: Xu, Mingyue, et al.
Pubblicazione: (2026)
Early-Warning Signals of Grokking via Loss-Landscape Geometry
di: Xu, Yongzhong
Pubblicazione: (2026)
di: Xu, Yongzhong
Pubblicazione: (2026)
The Complexity Dynamics of Grokking
di: DeMoss, Branton, et al.
Pubblicazione: (2024)
di: DeMoss, Branton, et al.
Pubblicazione: (2024)
Measuring Sharpness in Grokking
di: Miller, Jack, et al.
Pubblicazione: (2024)
di: Miller, Jack, et al.
Pubblicazione: (2024)
Bridging Lottery Ticket and Grokking: Understanding Grokking from Inner Structure of Networks
di: Minegishi, Gouki, et al.
Pubblicazione: (2023)
di: Minegishi, Gouki, et al.
Pubblicazione: (2023)
Grokked Models are Better Unlearners
di: Liang, Yuanbang, et al.
Pubblicazione: (2025)
di: Liang, Yuanbang, et al.
Pubblicazione: (2025)
Topological Signatures of Grokking
di: Tang, Yifan, et al.
Pubblicazione: (2026)
di: Tang, Yifan, et al.
Pubblicazione: (2026)
Dichotomy of Early and Late Phase Implicit Biases Can Provably Induce Grokking
di: Lyu, Kaifeng, et al.
Pubblicazione: (2023)
di: Lyu, Kaifeng, et al.
Pubblicazione: (2023)
Late-Stage Generalization Collapse in Grokking: Detecting anti-grokking with Weightwatcher
di: Prakash, Hari K, et al.
Pubblicazione: (2026)
di: Prakash, Hari K, et al.
Pubblicazione: (2026)
Exploring Grokking: Experimental and Mechanistic Investigations
di: Qiye, Hu, et al.
Pubblicazione: (2024)
di: Qiye, Hu, et al.
Pubblicazione: (2024)
The Geometric Inductive Bias of Grokking: Bypassing Phase Transitions via Architectural Topology
di: Yıldırım, Alper
Pubblicazione: (2026)
di: Yıldırım, Alper
Pubblicazione: (2026)
Distributional Spectral Diagnostics for Localizing Grokking Transitions
di: Wang, Ziyue, et al.
Pubblicazione: (2026)
di: Wang, Ziyue, et al.
Pubblicazione: (2026)
Grokking in Linear Models for Logistic Regression
di: Das, Nataraj, et al.
Pubblicazione: (2026)
di: Das, Nataraj, et al.
Pubblicazione: (2026)
Grokking Explained: A Statistical Phenomenon
di: Carvalho, Breno W., et al.
Pubblicazione: (2025)
di: Carvalho, Breno W., et al.
Pubblicazione: (2025)
Controlling Grokking with Nonlinearity and Data Symmetry
di: Salah, Ahmed, et al.
Pubblicazione: (2024)
di: Salah, Ahmed, et al.
Pubblicazione: (2024)
Grokking Finite-Dimensional Algebra
di: Notsawo, Pascal Jr Tikeng, et al.
Pubblicazione: (2026)
di: Notsawo, Pascal Jr Tikeng, et al.
Pubblicazione: (2026)
Grokking Group Multiplication with Cosets
di: Stander, Dashiell, et al.
Pubblicazione: (2023)
di: Stander, Dashiell, et al.
Pubblicazione: (2023)
Muon Optimizer Accelerates Grokking
di: Tveit, Amund, et al.
Pubblicazione: (2025)
di: Tveit, Amund, et al.
Pubblicazione: (2025)
Grokking of Diffusion Models: Case Study on Modular Addition
di: Kim, Joon Hyeok, et al.
Pubblicazione: (2026)
di: Kim, Joon Hyeok, et al.
Pubblicazione: (2026)
Explaining Grokking in Transformers through the Lens of Inductive Bias
di: Singh, Jaisidh, et al.
Pubblicazione: (2026)
di: Singh, Jaisidh, et al.
Pubblicazione: (2026)
Beyond Progress Measures: Theoretical Insights into the Mechanism of Grokking
di: Gu, Zihan, et al.
Pubblicazione: (2025)
di: Gu, Zihan, et al.
Pubblicazione: (2025)
Grokfast: Accelerated Grokking by Amplifying Slow Gradients
di: Lee, Jaerin, et al.
Pubblicazione: (2024)
di: Lee, Jaerin, et al.
Pubblicazione: (2024)
Mechanistic Insights into Grokking from the Embedding Layer
di: AlquBoj, H. V., et al.
Pubblicazione: (2025)
di: AlquBoj, H. V., et al.
Pubblicazione: (2025)
Understanding Grokking Through A Robustness Viewpoint
di: Tan, Zhiquan, et al.
Pubblicazione: (2023)
di: Tan, Zhiquan, et al.
Pubblicazione: (2023)
Progress Measures for Grokking on Real-world Tasks
di: Golechha, Satvik
Pubblicazione: (2024)
di: Golechha, Satvik
Pubblicazione: (2024)
Grokking at the Edge of Linear Separability
di: Beck, Alon, et al.
Pubblicazione: (2024)
di: Beck, Alon, et al.
Pubblicazione: (2024)
Grokking at the Edge of Numerical Stability
di: Prieto, Lucas, et al.
Pubblicazione: (2025)
di: Prieto, Lucas, et al.
Pubblicazione: (2025)
Is Grokking a Computational Glass Relaxation?
di: Zhang, Xiaotian, et al.
Pubblicazione: (2025)
di: Zhang, Xiaotian, et al.
Pubblicazione: (2025)
Explaining Grokking and Information Bottleneck through Neural Collapse Emergence
di: Sakamoto, Keitaro, et al.
Pubblicazione: (2025)
di: Sakamoto, Keitaro, et al.
Pubblicazione: (2025)
Egalitarian Gradient Descent: A Simple Approach to Accelerated Grokking
di: Pasand, Ali Saheb, et al.
Pubblicazione: (2025)
di: Pasand, Ali Saheb, et al.
Pubblicazione: (2025)
Flatness is Necessary, Neural Collapse is Not: Rethinking Generalization via Grokking
di: Han, Ting, et al.
Pubblicazione: (2025)
di: Han, Ting, et al.
Pubblicazione: (2025)
When Data Falls Short: Grokking Below the Critical Threshold
di: Singh, Vaibhav, et al.
Pubblicazione: (2025)
di: Singh, Vaibhav, et al.
Pubblicazione: (2025)
Deep Grokking: Would Deep Neural Networks Generalize Better?
di: Fan, Simin, et al.
Pubblicazione: (2024)
di: Fan, Simin, et al.
Pubblicazione: (2024)
Grokking Beyond Neural Networks: An Empirical Exploration with Model Complexity
di: Miller, Jack, et al.
Pubblicazione: (2023)
di: Miller, Jack, et al.
Pubblicazione: (2023)
Grokking in LLM Pretraining? Monitor Memorization-to-Generalization without Test
di: Li, Ziyue, et al.
Pubblicazione: (2025)
di: Li, Ziyue, et al.
Pubblicazione: (2025)
Grokking Modular Polynomials
di: Doshi, Darshil, et al.
Pubblicazione: (2024)
di: Doshi, Darshil, et al.
Pubblicazione: (2024)
Low-Dimensional and Transversely Curved Optimization Dynamics in Grokking
di: Xu, Yongzhong
Pubblicazione: (2026)
di: Xu, Yongzhong
Pubblicazione: (2026)
Tracing the Path to Grokking: Embeddings, Dropout, and Network Activation
di: Salah, Ahmed, et al.
Pubblicazione: (2025)
di: Salah, Ahmed, et al.
Pubblicazione: (2025)
Documenti analoghi
-
Tangma: A Tanh-Guided Activation Function with Learnable Parameters
di: Golwala, Shreel
Pubblicazione: (2025) -
GrokAlign: Geometric Characterisation and Acceleration of Grokking
di: Walker, Thomas, et al.
Pubblicazione: (2025) -
To Grok Grokking: Provable Grokking in Ridge Regression
di: Xu, Mingyue, et al.
Pubblicazione: (2026) -
Early-Warning Signals of Grokking via Loss-Landscape Geometry
di: Xu, Yongzhong
Pubblicazione: (2026) -
The Complexity Dynamics of Grokking
di: DeMoss, Branton, et al.
Pubblicazione: (2024)