Safe-EF: Error Feedback for Nonsmooth Constrained Optimization
Fuente:
arXiv
Enregistré dans:
| Auteurs principaux: | Islamov, Rustem, As, Yarden, Fatkhullin, Ilyas |
|---|---|
| Format: | Preprint |
| Publié: |
2025
|
| Sujets: | |
| Accès en ligne: | |
| Tags: |
Ajouter un tag
Pas de tags, Soyez le premier à ajouter un tag!
|
Documents similaires
EF21 with Bells & Whistles: Six Algorithmic Extensions of Modern Error Feedback
par: Fatkhullin, Ilyas, et autres
Publié: (2021)
par: Fatkhullin, Ilyas, et autres
Publié: (2021)
Double Momentum and Error Feedback for Clipping with Fast Rates and Differential Privacy
par: Islamov, Rustem, et autres
Publié: (2025)
par: Islamov, Rustem, et autres
Publié: (2025)
Second-order Optimization under Heavy-Tailed Noise: Hessian Clipping and Sample Complexity Limits
par: Sadiev, Abdurakhmon, et autres
Publié: (2025)
par: Sadiev, Abdurakhmon, et autres
Publié: (2025)
Enhancing Optimizer Stability: Momentum Adaptation of The NGN Step-size
par: Islamov, Rustem, et autres
Publié: (2025)
par: Islamov, Rustem, et autres
Publié: (2025)
Why Do We Need Warm-up? A Theoretical Perspective
par: Alimisis, Foivos, et autres
Publié: (2025)
par: Alimisis, Foivos, et autres
Publié: (2025)
Towards Faster Decentralized Stochastic Optimization with Communication Compression
par: Islamov, Rustem, et autres
Publié: (2024)
par: Islamov, Rustem, et autres
Publié: (2024)
Can SGD Handle Heavy-Tailed Noise?
par: Fatkhullin, Ilyas, et autres
Publié: (2025)
par: Fatkhullin, Ilyas, et autres
Publié: (2025)
From Gradient Clipping to Normalization for Heavy Tailed SGD
par: Hübler, Florian, et autres
Publié: (2024)
par: Hübler, Florian, et autres
Publié: (2024)
Non-Euclidean Gradient Descent Operates at the Edge of Stability
par: Islamov, Rustem, et autres
Publié: (2026)
par: Islamov, Rustem, et autres
Publié: (2026)
Loss Landscape Characterization of Neural Networks without Over-Parametrization
par: Islamov, Rustem, et autres
Publié: (2024)
par: Islamov, Rustem, et autres
Publié: (2024)
Byzantine-Robust and Differentially Private Federated Optimization under Weaker Assumptions
par: Islamov, Rustem, et autres
Publié: (2026)
par: Islamov, Rustem, et autres
Publié: (2026)
On the Role of Batch Size in Stochastic Conditional Gradient Methods
par: Islamov, Rustem, et autres
Publié: (2026)
par: Islamov, Rustem, et autres
Publié: (2026)
Global Optimality for Constrained Exploration via Penalty Regularization
par: Wolf, Florian, et autres
Publié: (2026)
par: Wolf, Florian, et autres
Publié: (2026)
Global Solutions to Non-Convex Functional Constrained Problems with Hidden Convexity
par: Fatkhullin, Ilyas, et autres
Publié: (2025)
par: Fatkhullin, Ilyas, et autres
Publié: (2025)
Deterministic Nonsmooth Nonconvex Optimization
par: Jordan, Michael I., et autres
Publié: (2023)
par: Jordan, Michael I., et autres
Publié: (2023)
The ADMM-PINNs Algorithmic Framework for Nonsmooth PDE-Constrained Optimization: A Deep Learning Approach
par: Song, Yongcun, et autres
Publié: (2023)
par: Song, Yongcun, et autres
Publié: (2023)
Safe Online Convex Optimization with Multi-Point Feedback
par: Hutchinson, Spencer, et autres
Publié: (2024)
par: Hutchinson, Spencer, et autres
Publié: (2024)
Accelerated Distributed Optimization with Compression and Error Feedback
par: Gao, Yuan, et autres
Publié: (2025)
par: Gao, Yuan, et autres
Publié: (2025)
On the Complexity of Finding Small Subgradients in Nonsmooth Optimization
par: Kornowski, Guy, et autres
Publié: (2022)
par: Kornowski, Guy, et autres
Publié: (2022)
Taming Nonconvex Stochastic Mirror Descent with General Bregman Divergence
par: Fatkhullin, Ilyas, et autres
Publié: (2024)
par: Fatkhullin, Ilyas, et autres
Publié: (2024)
Composite Optimization with Error Feedback: the Dual Averaging Approach
par: Gao, Yuan, et autres
Publié: (2025)
par: Gao, Yuan, et autres
Publié: (2025)
Adam-family Methods for Nonsmooth Optimization with Convergence Guarantees
par: Xiao, Nachuan, et autres
Publié: (2023)
par: Xiao, Nachuan, et autres
Publié: (2023)
Developing Lagrangian-based Methods for Nonsmooth Nonconvex Optimization
par: Xiao, Nachuan, et autres
Publié: (2024)
par: Xiao, Nachuan, et autres
Publié: (2024)
On the Hardness of Meaningful Local Guarantees in Nonsmooth Nonconvex Optimization
par: Kornowski, Guy, et autres
Publié: (2024)
par: Kornowski, Guy, et autres
Publié: (2024)
Natural Gradient VI: Guarantees for Non-Conjugate Models
par: Sun, Fangyuan, et autres
Publié: (2025)
par: Sun, Fangyuan, et autres
Publié: (2025)
A Tight Theory of Error Feedback Algorithms in Distributed Optimization
par: Thomsen, Daniel Berg, et autres
Publié: (2026)
par: Thomsen, Daniel Berg, et autres
Publié: (2026)
Zeroth-Order Methods for Stochastic Nonconvex Nonsmooth Composite Optimization
par: Chen, Ziyi, et autres
Publié: (2025)
par: Chen, Ziyi, et autres
Publié: (2025)
Model-Free $μ$-Synthesis: A Nonsmooth Optimization Perspective
par: Keivan, Darioush, et autres
Publié: (2024)
par: Keivan, Darioush, et autres
Publié: (2024)
Faster Gradient-Free Algorithms for Nonsmooth Nonconvex Stochastic Optimization
par: Chen, Lesi, et autres
Publié: (2023)
par: Chen, Lesi, et autres
Publié: (2023)
Safe and Efficient Online Convex Optimization with Linear Budget Constraints and Partial Feedback
par: Liu, Shanqi, et autres
Publié: (2024)
par: Liu, Shanqi, et autres
Publié: (2024)
Finite-Time Analysis of Stochastic Nonconvex Nonsmooth Optimization on the Riemannian Manifolds
par: Sahinoglu, Emre, et autres
Publié: (2025)
par: Sahinoglu, Emre, et autres
Publié: (2025)
A Proximal Modified Quasi-Newton Method for Nonsmooth Regularized Optimization
par: Diouane, Youssef, et autres
Publié: (2024)
par: Diouane, Youssef, et autres
Publié: (2024)
Error Feedback for Muon and Friends
par: Gruntkowska, Kaja, et autres
Publié: (2025)
par: Gruntkowska, Kaja, et autres
Publié: (2025)
Improved Last-Iterate Convergence of Shuffling Gradient Methods for Nonsmooth Convex Optimization
par: Liu, Zijian, et autres
Publié: (2025)
par: Liu, Zijian, et autres
Publié: (2025)
Low-Rank Extragradient Method for Nonsmooth and Low-Rank Matrix Optimization Problems
par: Garber, Dan, et autres
Publié: (2022)
par: Garber, Dan, et autres
Publié: (2022)
An Algorithm with Optimal Dimension-Dependence for Zero-Order Nonsmooth Nonconvex Stochastic Optimization
par: Kornowski, Guy, et autres
Publié: (2023)
par: Kornowski, Guy, et autres
Publié: (2023)
Low-Rank Mirror-Prox for Nonsmooth and Low-Rank Matrix Optimization Problems
par: Garber, Dan, et autres
Publié: (2022)
par: Garber, Dan, et autres
Publié: (2022)
Adaptive Matrix Online Learning through Smoothing with Guarantees for Nonsmooth Nonconvex Optimization
par: Jiang, Ruichen, et autres
Publié: (2026)
par: Jiang, Ruichen, et autres
Publié: (2026)
Online Optimization Perspective on First-Order and Zero-Order Decentralized Nonsmooth Nonconvex Stochastic Optimization
par: Sahinoglu, Emre, et autres
Publié: (2024)
par: Sahinoglu, Emre, et autres
Publié: (2024)
Nonsmooth Nonconvex-Nonconcave Minimax Optimization: Primal-Dual Balancing and Iteration Complexity Analysis
par: Li, Jiajin, et autres
Publié: (2022)
par: Li, Jiajin, et autres
Publié: (2022)
Documents similaires
-
EF21 with Bells & Whistles: Six Algorithmic Extensions of Modern Error Feedback
par: Fatkhullin, Ilyas, et autres
Publié: (2021) -
Double Momentum and Error Feedback for Clipping with Fast Rates and Differential Privacy
par: Islamov, Rustem, et autres
Publié: (2025) -
Second-order Optimization under Heavy-Tailed Noise: Hessian Clipping and Sample Complexity Limits
par: Sadiev, Abdurakhmon, et autres
Publié: (2025) -
Enhancing Optimizer Stability: Momentum Adaptation of The NGN Step-size
par: Islamov, Rustem, et autres
Publié: (2025) -
Why Do We Need Warm-up? A Theoretical Perspective
par: Alimisis, Foivos, et autres
Publié: (2025)