Mirror, Mirror of the Flow: How Does Regularization Shape Implicit Bias?
Fuente:
arXiv
Gespeichert in:
| Hauptverfasser: | Jacobs, Tom, Zhou, Chao, Burkholz, Rebekka |
|---|---|
| Format: | Preprint |
| Veröffentlicht: |
2025
|
| Schlagworte: | |
| Online-Zugang: | |
| Tags: |
Tag hinzufügen
Keine Tags, Fügen Sie den ersten Tag hinzu!
|
Ähnliche Einträge
Mask in the Mirror: Implicit Sparsification
von: Jacobs, Tom, et al.
Veröffentlicht: (2024)
von: Jacobs, Tom, et al.
Veröffentlicht: (2024)
Never Saddle for Reparameterized Steepest Descent as Mirror Flow
von: Jacobs, Tom, et al.
Veröffentlicht: (2026)
von: Jacobs, Tom, et al.
Veröffentlicht: (2026)
Hyperbolic Aware Minimization: Implicit Bias for Sparsity
von: Jacobs, Tom, et al.
Veröffentlicht: (2025)
von: Jacobs, Tom, et al.
Veröffentlicht: (2025)
Implicit Bias of Mirror Flow in Homogeneous Neural Networks: Sparse and Dense Feature Learning
von: Jacobs, Tom, et al.
Veröffentlicht: (2026)
von: Jacobs, Tom, et al.
Veröffentlicht: (2026)
Pay Attention to Small Weights
von: Zhou, Chao, et al.
Veröffentlicht: (2025)
von: Zhou, Chao, et al.
Veröffentlicht: (2025)
HORST: Composing Optimizer Geometries for Sparse Transformer Training
von: Jacobs, Tom, et al.
Veröffentlicht: (2026)
von: Jacobs, Tom, et al.
Veröffentlicht: (2026)
Sign-In to the Lottery: Reparameterizing Sparse Training From Scratch
von: Gadhikar, Advait, et al.
Veröffentlicht: (2025)
von: Gadhikar, Advait, et al.
Veröffentlicht: (2025)
Implicit Bias of Mirror Flow on Separable Data
von: Pesme, Scott, et al.
Veröffentlicht: (2024)
von: Pesme, Scott, et al.
Veröffentlicht: (2024)
GATE: How to Keep Out Intrusive Neighbors
von: Mustafa, Nimrah, et al.
Veröffentlicht: (2024)
von: Mustafa, Nimrah, et al.
Veröffentlicht: (2024)
Implicit Bias of Mirror Flow for Shallow Neural Networks in Univariate Regression
von: Liang, Shuang, et al.
Veröffentlicht: (2024)
von: Liang, Shuang, et al.
Veröffentlicht: (2024)
Implicit Bias and Convergence of Matrix Stochastic Mirror Descent
von: Akhtiamov, Danil, et al.
Veröffentlicht: (2026)
von: Akhtiamov, Danil, et al.
Veröffentlicht: (2026)
Masks, Signs, And Learning Rate Rewinding
von: Gadhikar, Advait, et al.
Veröffentlicht: (2024)
von: Gadhikar, Advait, et al.
Veröffentlicht: (2024)
A Unified Approach to Controlling Implicit Regularization via Mirror Descent
von: Sun, Haoyuan, et al.
Veröffentlicht: (2023)
von: Sun, Haoyuan, et al.
Veröffentlicht: (2023)
The Graphon Limit Hypothesis: Understanding Neural Network Pruning via Infinite Width Analysis
von: Pham, Hoang, et al.
Veröffentlicht: (2025)
von: Pham, Hoang, et al.
Veröffentlicht: (2025)
Fixed Aggregation Features Can Rival GNNs
von: Rubio-Madrigal, Celia, et al.
Veröffentlicht: (2026)
von: Rubio-Madrigal, Celia, et al.
Veröffentlicht: (2026)
On the Effect of Regularization in Policy Mirror Descent
von: Kleuker, Jan Felix, et al.
Veröffentlicht: (2025)
von: Kleuker, Jan Felix, et al.
Veröffentlicht: (2025)
Robustness of Mixtures of Experts to Feature Noise
von: Sun, Dong, et al.
Veröffentlicht: (2026)
von: Sun, Dong, et al.
Veröffentlicht: (2026)
SparseOpt: Addressing Normalization-induced Gradient Skew in Sparse Training
von: Adnan, Mohammed, et al.
Veröffentlicht: (2026)
von: Adnan, Mohammed, et al.
Veröffentlicht: (2026)
Approximation of Log-Partition Function in Policy Mirror Descent Induces Implicit Regularization for LLM Post-Training
von: Xu, Zhenghao, et al.
Veröffentlicht: (2026)
von: Xu, Zhenghao, et al.
Veröffentlicht: (2026)
One-Step Flow Policy Mirror Descent
von: Chen, Tianyi, et al.
Veröffentlicht: (2025)
von: Chen, Tianyi, et al.
Veröffentlicht: (2025)
Spectral Graph Pruning Against Over-Squashing and Over-Smoothing
von: Jamadandi, Adarsh, et al.
Veröffentlicht: (2024)
von: Jamadandi, Adarsh, et al.
Veröffentlicht: (2024)
Bridging Domains through Subspace-Aware Model Merging
von: Chaves, Levy, et al.
Veröffentlicht: (2026)
von: Chaves, Levy, et al.
Veröffentlicht: (2026)
GNNs Getting ComFy: Community and Feature Similarity Guided Rewiring
von: Rubio-Madrigal, Celia, et al.
Veröffentlicht: (2025)
von: Rubio-Madrigal, Celia, et al.
Veröffentlicht: (2025)
The Implicit Bias of Logit Regularization
von: Beck, Alon, et al.
Veröffentlicht: (2026)
von: Beck, Alon, et al.
Veröffentlicht: (2026)
Entropic Mirror Descent for Linear Systems: Polyak's Stepsize and Implicit Bias
von: Malitsky, Yura, et al.
Veröffentlicht: (2025)
von: Malitsky, Yura, et al.
Veröffentlicht: (2025)
Stability and Robustness via Regularization: Bandit Inference via Regularized Stochastic Mirror Descent
von: Halder, Budhaditya, et al.
Veröffentlicht: (2026)
von: Halder, Budhaditya, et al.
Veröffentlicht: (2026)
Plasticity as the Mirror of Empowerment
von: Abel, David, et al.
Veröffentlicht: (2025)
von: Abel, David, et al.
Veröffentlicht: (2025)
Data Diversity as Implicit Regularization: How Does Diversity Shape the Weight Space of Deep Neural Networks?
von: Ba, Yang, et al.
Veröffentlicht: (2024)
von: Ba, Yang, et al.
Veröffentlicht: (2024)
Cyclic Sparse Training: Is it Enough?
von: Gadhikar, Advait, et al.
Veröffentlicht: (2024)
von: Gadhikar, Advait, et al.
Veröffentlicht: (2024)
Multi-Agent Systems are Mixtures of Experts: Who Becomes an Influencer?
von: Bause, Franka, et al.
Veröffentlicht: (2026)
von: Bause, Franka, et al.
Veröffentlicht: (2026)
Flow Matching Policy Optimization with Mirror Descent and Entropy Constraints
von: Gao, Ting, et al.
Veröffentlicht: (2026)
von: Gao, Ting, et al.
Veröffentlicht: (2026)
Pruning neural network models for gene regulatory dynamics using data and domain knowledge
von: Hossain, Intekhab, et al.
Veröffentlicht: (2024)
von: Hossain, Intekhab, et al.
Veröffentlicht: (2024)
When Shift Happens - Confounding Is to Blame
von: Reddy, Abbavaram Gowtham, et al.
Veröffentlicht: (2025)
von: Reddy, Abbavaram Gowtham, et al.
Veröffentlicht: (2025)
Frequency-Based Hyperparameter Selection in Games
von: Sanyal, Aniket, et al.
Veröffentlicht: (2026)
von: Sanyal, Aniket, et al.
Veröffentlicht: (2026)
PLS in the Mirror of Self-Attention
von: Jiangsheng, et al.
Veröffentlicht: (2026)
von: Jiangsheng, et al.
Veröffentlicht: (2026)
Mirror Flow Matching with Heavy-Tailed Priors for Generative Modeling on Convex Domains
von: Guan, Yunrui, et al.
Veröffentlicht: (2025)
von: Guan, Yunrui, et al.
Veröffentlicht: (2025)
Entropic Mirror Monte Carlo
von: Cherradi, Anas, et al.
Veröffentlicht: (2026)
von: Cherradi, Anas, et al.
Veröffentlicht: (2026)
Mirror Bridges Between Probability Measures
von: Da Silva, Leticia Mattos, et al.
Veröffentlicht: (2024)
von: Da Silva, Leticia Mattos, et al.
Veröffentlicht: (2024)
Smoke and Mirrors in Causal Downstream Tasks
von: Cadei, Riccardo, et al.
Veröffentlicht: (2024)
von: Cadei, Riccardo, et al.
Veröffentlicht: (2024)
Parameter-free Mirror Descent
von: Jacobsen, Andrew, et al.
Veröffentlicht: (2022)
von: Jacobsen, Andrew, et al.
Veröffentlicht: (2022)
Ähnliche Einträge
-
Mask in the Mirror: Implicit Sparsification
von: Jacobs, Tom, et al.
Veröffentlicht: (2024) -
Never Saddle for Reparameterized Steepest Descent as Mirror Flow
von: Jacobs, Tom, et al.
Veröffentlicht: (2026) -
Hyperbolic Aware Minimization: Implicit Bias for Sparsity
von: Jacobs, Tom, et al.
Veröffentlicht: (2025) -
Implicit Bias of Mirror Flow in Homogeneous Neural Networks: Sparse and Dense Feature Learning
von: Jacobs, Tom, et al.
Veröffentlicht: (2026) -
Pay Attention to Small Weights
von: Zhou, Chao, et al.
Veröffentlicht: (2025)