Non-smooth stochastic gradient descent using smoothing functions
Fuente:
arXiv
Salvato in:
| Autori principali: | Giovannelli, Tommaso, Tan, Jingfu, Vicente, Luis Nunes |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
Stochastic set-valued optimization and its application to robust learning
di: Giovannelli, Tommaso, et al.
Pubblicazione: (2026)
di: Giovannelli, Tommaso, et al.
Pubblicazione: (2026)
A stochastic gradient method for trilevel optimization
di: Giovannelli, Tommaso, et al.
Pubblicazione: (2025)
di: Giovannelli, Tommaso, et al.
Pubblicazione: (2025)
Worst-case convergence analysis of relatively inexact gradient descent on smooth convex functions
di: Vernimmen, Pierre, et al.
Pubblicazione: (2025)
di: Vernimmen, Pierre, et al.
Pubblicazione: (2025)
Pareto sensitivity, most-changing sub-fronts, and knee solutions
di: Giovannelli, Tommaso, et al.
Pubblicazione: (2025)
di: Giovannelli, Tommaso, et al.
Pubblicazione: (2025)
Proximal gradient descent on the smoothed duality gap to solve saddle point problems
di: Fercoq, Olivier
Pubblicazione: (2025)
di: Fercoq, Olivier
Pubblicazione: (2025)
Coordinate descent methods beyond smoothness and separability
di: Chorobura, Flavia, et al.
Pubblicazione: (2024)
di: Chorobura, Flavia, et al.
Pubblicazione: (2024)
Minimizing smooth Kurdyka-Łojasiewicz functions via generalized descent methods: Convergence rate and complexity
di: Ahookhosh, Masoud, et al.
Pubblicazione: (2025)
di: Ahookhosh, Masoud, et al.
Pubblicazione: (2025)
Gaussian smoothing gradient descent for minimizing functions (GSmoothGD)
di: Starnes, Andrew, et al.
Pubblicazione: (2023)
di: Starnes, Andrew, et al.
Pubblicazione: (2023)
Nonconvex optimization and convergence of stochastic gradient descent, and solution of asynchronous game
di: Buck, Kevin, et al.
Pubblicazione: (2025)
di: Buck, Kevin, et al.
Pubblicazione: (2025)
An accelerated proximal PRS-SQP algorithm with dual ascent-descent procedures for smooth composite optimization
di: Jin, Jiachen, et al.
Pubblicazione: (2025)
di: Jin, Jiachen, et al.
Pubblicazione: (2025)
Projected gradient methods for nonconvex and stochastic smooth optimization: new complexities and auto-conditioned stepsizes
di: Lan, Guanghui, et al.
Pubblicazione: (2024)
di: Lan, Guanghui, et al.
Pubblicazione: (2024)
Nonlinear conjugate gradient for smooth convex functions
di: Karimi, Sahar, et al.
Pubblicazione: (2021)
di: Karimi, Sahar, et al.
Pubblicazione: (2021)
New logarithmic step size for stochastic gradient descent
di: Shamaee, M. Soheil, et al.
Pubblicazione: (2024)
di: Shamaee, M. Soheil, et al.
Pubblicazione: (2024)
Convergence of linesearch-based generalized conditional gradient methods without smoothness assumptions
di: Yagishita, Shotaro
Pubblicazione: (2025)
di: Yagishita, Shotaro
Pubblicazione: (2025)
A geometric integration approach to smooth optimisation: Foundations of the discrete gradient method
di: Ehrhardt, Matthias J., et al.
Pubblicazione: (2018)
di: Ehrhardt, Matthias J., et al.
Pubblicazione: (2018)
Differentiation of inertial methods for optimizing smooth parametric function
di: Godeme, Jean-Jacques
Pubblicazione: (2025)
di: Godeme, Jean-Jacques
Pubblicazione: (2025)
A stochastic perturbed augmented Lagrangian method for smooth convex constrained minimization
di: Singh, Nitesh Kumar, et al.
Pubblicazione: (2025)
di: Singh, Nitesh Kumar, et al.
Pubblicazione: (2025)
A stochastic moving ball approximation method for smooth convex constrained minimization
di: Singh, Nitesh Kumar, et al.
Pubblicazione: (2024)
di: Singh, Nitesh Kumar, et al.
Pubblicazione: (2024)
A stochastic gradient descent algorithm with random search directions
di: Gbaguidi, Eméric
Pubblicazione: (2025)
di: Gbaguidi, Eméric
Pubblicazione: (2025)
Stochastic smoothing accelerated gradient method for general constrained nonsmooth convex composite optimization
di: Wang, Ruyu, et al.
Pubblicazione: (2023)
di: Wang, Ruyu, et al.
Pubblicazione: (2023)
Accelerated Bregman gradient methods for relatively smooth and relatively Lipschitz continuous minimization problems
di: Savchuk, O. S., et al.
Pubblicazione: (2024)
di: Savchuk, O. S., et al.
Pubblicazione: (2024)
On the Solvability of Quasi-Regulator Equations in Non-smooth Output Regulation
di: Niu, Zirui, et al.
Pubblicazione: (2026)
di: Niu, Zirui, et al.
Pubblicazione: (2026)
Sequential test sampling for stochastic derivative-free optimization
di: Ding, Anjie, et al.
Pubblicazione: (2025)
di: Ding, Anjie, et al.
Pubblicazione: (2025)
Output Regulation of Linear Systems with Non-periodic Non-smooth Exogenous Signals
di: Niu, Zirui, et al.
Pubblicazione: (2025)
di: Niu, Zirui, et al.
Pubblicazione: (2025)
Variational inequalities and smooth-fit principle for singular stochastic control problems in Hilbert spaces
di: Federico, Salvatore, et al.
Pubblicazione: (2024)
di: Federico, Salvatore, et al.
Pubblicazione: (2024)
Implicit regularization of normalized gradient descent
di: Josz, Cédric
Pubblicazione: (2026)
di: Josz, Cédric
Pubblicazione: (2026)
A Stochastic Newton-type Method for Non-smooth Optimization
di: Pinta, Titus
Pubblicazione: (2025)
di: Pinta, Titus
Pubblicazione: (2025)
Zeroth-Order Non-smooth Non-convex Optimization via Gaussian Smoothing
di: Paul, Anik Kumar, et al.
Pubblicazione: (2025)
di: Paul, Anik Kumar, et al.
Pubblicazione: (2025)
Convergence of continuous-time stochastic gradient descent with applications to deep neural networks
di: Lugosi, Gabor, et al.
Pubblicazione: (2024)
di: Lugosi, Gabor, et al.
Pubblicazione: (2024)
Quantum Algorithms for Non-smooth Non-convex Optimization
di: Liu, Chengchang, et al.
Pubblicazione: (2024)
di: Liu, Chengchang, et al.
Pubblicazione: (2024)
Adaptive control mechanisms in gradient descent algorithms
di: Iannelli, Andrea
Pubblicazione: (2025)
di: Iannelli, Andrea
Pubblicazione: (2025)
Single-loop $\mathcal{O}(ε^{-3})$ stochastic smoothing algorithms for nonsmooth Riemannian optimization
di: Deng, Kangkang, et al.
Pubblicazione: (2025)
di: Deng, Kangkang, et al.
Pubblicazione: (2025)
Quantum Hamiltonian Descent for Non-smooth Optimization
di: Leng, Jiaqi, et al.
Pubblicazione: (2025)
di: Leng, Jiaqi, et al.
Pubblicazione: (2025)
Convergence of Spectral Descent for Non-smooth Optimization
di: Yang, Yixuan, et al.
Pubblicazione: (2026)
di: Yang, Yixuan, et al.
Pubblicazione: (2026)
Estimating Sequences with Memory for Minimizing Convex Non-smooth Composite Functions
di: Dosti, Endrit, et al.
Pubblicazione: (2025)
di: Dosti, Endrit, et al.
Pubblicazione: (2025)
Frank-Wolfe Algorithms for (L0, L1)-smooth functions
di: Vyguzov, A. A., et al.
Pubblicazione: (2025)
di: Vyguzov, A. A., et al.
Pubblicazione: (2025)
Mirror descent for constrained stochastic control problems
di: Sethi, Deven, et al.
Pubblicazione: (2025)
di: Sethi, Deven, et al.
Pubblicazione: (2025)
Random Scaling and Momentum for Non-smooth Non-convex Optimization
di: Zhang, Qinzi, et al.
Pubblicazione: (2024)
di: Zhang, Qinzi, et al.
Pubblicazione: (2024)
Non-convergence to global minimizers for Adam and stochastic gradient descent optimization and constructions of local minimizers in the training of artificial neural networks
di: Jentzen, Arnulf, et al.
Pubblicazione: (2024)
di: Jentzen, Arnulf, et al.
Pubblicazione: (2024)
Verification theorem related to a zero sum stochastic differential game, based on a chain rule for non-smooth functions
di: Ciccarella, Carlo, et al.
Pubblicazione: (2024)
di: Ciccarella, Carlo, et al.
Pubblicazione: (2024)
Documenti analoghi
-
Stochastic set-valued optimization and its application to robust learning
di: Giovannelli, Tommaso, et al.
Pubblicazione: (2026) -
A stochastic gradient method for trilevel optimization
di: Giovannelli, Tommaso, et al.
Pubblicazione: (2025) -
Worst-case convergence analysis of relatively inexact gradient descent on smooth convex functions
di: Vernimmen, Pierre, et al.
Pubblicazione: (2025) -
Pareto sensitivity, most-changing sub-fronts, and knee solutions
di: Giovannelli, Tommaso, et al.
Pubblicazione: (2025) -
Proximal gradient descent on the smoothed duality gap to solve saddle point problems
di: Fercoq, Olivier
Pubblicazione: (2025)