Buchumschlag

Tilting the Odds at the Lottery: the Interplay of Overparameterisation and Curricula in Neural Networks

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Mannelli, Stefano Sarao, Ivashynka, Yaraslau, Saxe, Andrew, Saglietti, Luca
Format:	Preprint
Veröffentlicht:	2024
Schlagworte:	Machine Learning Disordered Systems and Neural Networks Neurons and Cognition
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Why Do Animals Need Shaping? A Theory of Task Composition and Curriculum Learning
von: Lee, Jin Hwa, et al.
Veröffentlicht: (2024)

The Interplay of Data Structure and Imbalance in the Learning Dynamics of Diffusion Models
von: Nicoletti, Flavio, et al.
Veröffentlicht: (2026)

Dynamically Learning to Integrate in Recurrent Neural Networks
von: Bordelon, Blake, et al.
Veröffentlicht: (2025)

Dynamical Learning in Deep Asymmetric Recurrent Neural Networks
von: Badalotti, Davide, et al.
Veröffentlicht: (2025)

Bias-inducing geometries: an exactly solvable data model with fairness implications
von: Mannelli, Stefano Sarao, et al.
Veröffentlicht: (2022)

DeepNose: An Equivariant Convolutional Neural Network Predictive Of Human Olfactory Percepts
von: Shuvaev, Sergey, et al.
Veröffentlicht: (2024)

Signal-to-Noise Ratio and Sample Size Govern Representational Alignment in Neural Networks
von: Umar, Ali Hussaini, et al.
Veröffentlicht: (2026)

Collective Dynamics in Spiking Neural Networks Beyond Dale's Principle
von: Ah-Weng, Ross, et al.
Veröffentlicht: (2026)

Spectral Analysis of Representational Similarity with Limited Neurons
von: Kang, Hyunmo, et al.
Veröffentlicht: (2025)

Learning Curves for Noisy Heterogeneous Feature-Subsampled Ridge Ensembles
von: Ruben, Benjamin S., et al.
Veröffentlicht: (2023)

L1-Regularized ICA: A Novel Method for Analysis of Task-related fMRI Data
von: Endo, Yusuke, et al.
Veröffentlicht: (2024)

Statistical Mechanics of Support Vector Regression
von: Canatar, Abdulkadir, et al.
Veröffentlicht: (2024)

Neuronal correlations shape the scaling behavior of memory capacity and nonlinear computational capability of reservoir recurrent neural networks
von: Takasu, Shotaro, et al.
Veröffentlicht: (2025)

Solving adversarial examples requires solving exponential misalignment
von: Salvatore, Alessandro, et al.
Veröffentlicht: (2026)

Proof of a perfect platonic representation hypothesis
von: Ziyin, Liu, et al.
Veröffentlicht: (2025)

Neural Langevin Machine: a local asymmetric learning rule can be creative
von: Yu, Zhendong, et al.
Veröffentlicht: (2025)

Theory of enhanced-by-coincidence neural information transmission
von: Ibáñez-Berganza, Miguel, et al.
Veröffentlicht: (2025)

Non-stationary dynamics of interspike intervals in neuronal populations
von: Falorsi, Luca, et al.
Veröffentlicht: (2025)

Linear Readout of Neural Manifolds with Continuous Variables
von: Slatton, Will, et al.
Veröffentlicht: (2026)

The RL Perceptron: Generalisation Dynamics of Policy Learning in High Dimensions
von: Patel, Nishil, et al.
Veröffentlicht: (2023)

Integrated Information Decomposition Unveils Major Structural Traits of $In$ $Silico$ and $In$ $Vitro$ Neuronal Networks
von: Menesse, Gustavo, et al.
Veröffentlicht: (2024)

A generalized neural tangent kernel for surrogate gradient learning
von: Eilers, Luke, et al.
Veröffentlicht: (2024)

Discrete synaptic events induce global oscillations in balanced neural networks
von: Goldobin, Denis S., et al.
Veröffentlicht: (2023)

Statistical mechanics for networks of real neurons
von: Meshulam, Leenoy, et al.
Veröffentlicht: (2024)

A robust balancing mechanism for spiking neural networks
von: Politi, Antonio, et al.
Veröffentlicht: (2024)

Task learning through stimulation-induced plasticity in neural networks
von: Borra, Francesco, et al.
Veröffentlicht: (2024)

Self-consistent stochastic dynamics for finite-size networks of spiking neurons
von: Vinci, Gianni V., et al.
Veröffentlicht: (2021)

Mechanisms underlying the response of mouse cortical networks to optogenetic manipulation
von: Mahrach, Alexandre, et al.
Veröffentlicht: (2019)

The FlEye camera: Sampling the joint distribution of natural scenes and motion
von: Edelson, Charles J., et al.
Veröffentlicht: (2024)

Metastability in networks of nonlinear stochastic integrate-and-fire neurons
von: Paliwal, Siddharth, et al.
Veröffentlicht: (2024)

Information dynamics of $in\; silico$ EEG Brain Waves: Insights into oscillations and functions
von: Menesse, Gustavo, et al.
Veröffentlicht: (2023)

Astrocytic NMDA Receptors Modulate the Dynamics of Continuous Attractors
von: Liu, Zihan, et al.
Veröffentlicht: (2024)

Impact of dendritic non-linearities on the computational capabilities of neurons
von: Lauditi, Clarissa, et al.
Veröffentlicht: (2024)

Effect of Synaptic Heterogeneity on Neuronal Coordination
von: Layer, Moritz, et al.
Veröffentlicht: (2023)

Spatio-temporal activity patterns induced by triadic interactions in an in silico neural medium
von: Millán, Ana P., et al.
Veröffentlicht: (2024)

Global and local synchrony of coupled neurons in small-world networks
von: Masuda, Naoki, et al.
Veröffentlicht: (2024)

Coexistence of asynchronous and clustered dynamics in noisy inhibitory neural networks
von: Feld, Yannick, et al.
Veröffentlicht: (2024)

Symmetries at the origin of hierarchical emergence
von: Rosas, Fernando E.
Veröffentlicht: (2025)

Applications of information geometry to spiking neural network behavior
von: Crosser, Jacob T., et al.
Veröffentlicht: (2023)

Diagrammatic expansion for the mutual-information rate in the realm of limited statistics
von: Kühn, Tobias, et al.
Veröffentlicht: (2025)