Buchumschlag

FANoS-v2: Feedback-Controlled Momentum with Thermostat Damping for Lightweight Neural Optimization

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
1. Verfasser:	Dhiman, Nalin
Format:	Preprint
Veröffentlicht:	2025
Schlagworte:	Machine Learning
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Topological Sensitivity in Connectome-Constrained Neural Networks
von: Dhiman, Nalin
Veröffentlicht: (2026)

Adaptive Momentum and Nonlinear Damping for Neural Network Training
von: Karoni, Aikaterini, et al.
Veröffentlicht: (2026)

Fast Generalization after Interpolation via Critically Damped Momentum Optimization
von: Muscarnera, Luca, et al.
Veröffentlicht: (2026)

Beta-Scheduling: Momentum from Critical Damping as a Diagnostic and Correction Tool for Neural Network Training
von: Pasichnyk, Ivan
Veröffentlicht: (2026)

AdamFLIP: Adaptive Momentum Feedback Linearization Optimization for Hard Constrained PINN Training
von: Lu, Binghang, et al.
Veröffentlicht: (2026)

1st-Order Magic: Analysis of Sharpness-Aware Minimization
von: Tiwary, Nalin, et al.
Veröffentlicht: (2024)

A Velocity Coupled Radial Acceleration Ansatz for Disk-Galaxy Rotation Curves: Fits to SPARC, Bayesian Inference, and Parameter Identifiability
von: Dhiman, Nalin
Veröffentlicht: (2025)

sidmkit: A Reproducible Toolkit for SIDM Phenomenology and Galaxy Rotation-Curve Modeling
von: Dhiman, Nalin
Veröffentlicht: (2026)

The Physics of the Dancing \emph{Deity}: Coupled Oscillators in Himalayan Processions
von: Dhiman, Nalin
Veröffentlicht: (2026)

Error Feedback under $(L_0,L_1)$-Smoothness: Normalization and Momentum
von: Khirirat, Sarit, et al.
Veröffentlicht: (2024)

Improved Convergence in Parameter-Agnostic Error Feedback through Momentum
von: Sadiev, Abdurakhmon, et al.
Veröffentlicht: (2025)

FISMO: Fisher-Structured Momentum-Orthogonalized Optimizer
von: Xu, Chenrui, et al.
Veröffentlicht: (2026)

Double Momentum and Error Feedback for Clipping with Fast Rates and Differential Privacy
von: Islamov, Rustem, et al.
Veröffentlicht: (2025)

Bridging Training and Merging Through Momentum-Aware Optimization
von: Moayedikia, Alireza, et al.
Veröffentlicht: (2025)

Lyapunov Neural ODE State-Feedback Control Policies
von: Ip, Joshua Hang Sai, et al.
Veröffentlicht: (2024)

Stochastic Difference-of-Convex Optimization with Momentum
von: Chayti, El Mahdi, et al.
Veröffentlicht: (2025)

On the Limits of Momentum in Decentralized and Federated Optimization
von: Zaccone, Riccardo, et al.
Veröffentlicht: (2025)

DeMo: Decoupled Momentum Optimization
von: Peng, Bowen, et al.
Veröffentlicht: (2024)

Neural Dueling Bandits: Preference-Based Optimization with Human Feedback
von: Verma, Arun, et al.
Veröffentlicht: (2024)

Feed-Forward Optimization With Delayed Feedback for Neural Network Training
von: Flügel, Katharina, et al.
Veröffentlicht: (2023)

Lightweight Robust Direct Preference Optimization
von: Kim, Cheol Woo, et al.
Veröffentlicht: (2025)

Optimizing the Adversarial Perturbation with a Momentum-based Adaptive Matrix
von: Tao, Wei, et al.
Veröffentlicht: (2025)

Outer-Momentum Restarting in High-Dimensional Two-Phase Optimization
von: Topollai, Kristi, et al.
Veröffentlicht: (2026)

Bayesian Optimization of a Lightweight and Accurate Neural Network for Aerodynamic Performance Prediction
von: Shihua, James M., et al.
Veröffentlicht: (2025)

Linear Feedback Control Systems for Iterative Prompt Optimization in Large Language Models
von: Karn, Rupesh Raj
Veröffentlicht: (2025)

A Lightweight and Gradient-Stable Neural Layer
von: Yu, Yueyao, et al.
Veröffentlicht: (2021)

Shuffling Momentum Gradient Algorithm for Convex Optimization
von: Tran, Trang H., et al.
Veröffentlicht: (2024)

Interactive Training: Feedback-Driven Neural Network Optimization
von: Zhang, Wentao, et al.
Veröffentlicht: (2025)

Alada: Alternating Adaptation of Momentum Method for Memory-Efficient Matrix Optimization
von: He, Xiaoyu, et al.
Veröffentlicht: (2025)

RMNP: Row-Momentum Normalized Preconditioning for Scalable Matrix-Based Optimization
von: Deng, Shenyang, et al.
Veröffentlicht: (2026)

DP-Muon: Differentially Private Optimization via Matrix-Orthogonalized Momentum
von: Kim, Jihwan, et al.
Veröffentlicht: (2026)

React to Surprises: Stable-by-Design Neural Feedback Control and the Youla-REN
von: Barbara, Nicholas H., et al.
Veröffentlicht: (2025)

Momentum Streams for Optimizer-Inspired Transformers
von: Gai, Jingchu, et al.
Veröffentlicht: (2026)

Enhanced Momentum with Momentum Transformers
von: Mason, Max, et al.
Veröffentlicht: (2024)

Non-convex Stochastic Composite Optimization with Polyak Momentum
von: Gao, Yuan, et al.
Veröffentlicht: (2024)

Adaptive Optimization via Momentum on Variance-Normalized Gradients
von: Patitucci, Francisco, et al.
Veröffentlicht: (2026)

On the Provable Suboptimality of Momentum SGD in Nonstationary Stochastic Optimization
von: Sahu, Sharan, et al.
Veröffentlicht: (2026)

DADEE: Well-calibrated uncertainty quantification in neural networks for barriers-based robot safety
von: Ataei, Masoud, et al.
Veröffentlicht: (2024)

Simplifying Momentum-based Positive-definite Submanifold Optimization with Applications to Deep Learning
von: Lin, Wu, et al.
Veröffentlicht: (2023)

Joker: Joint Optimization Framework for Lightweight Kernel Machines
von: Zhang, Junhong, et al.
Veröffentlicht: (2025)