Buchumschlag

Beyond Gradient Averaging in Parallel Optimization: Improved Robustness through Gradient Agreement Filtering

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Chaubard, Francois, Eddy, Duncan, Kochenderfer, Mykel J.
Format:	Preprint
Veröffentlicht:	2024
Schlagworte:	Machine Learning Artificial Intelligence
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Scaling Recurrent Neural Networks to a Billion Parameters with Zero-Order Optimization
von: Chaubard, Francois, et al.
Veröffentlicht: (2025)

Graph Q-Learning for Combinatorial Optimization
von: Dax, Victoria M., et al.
Veröffentlicht: (2024)

Failure Probability Estimation for Black-Box Autonomous Systems using State-Dependent Importance Sampling Proposals
von: Delecki, Harrison, et al.
Veröffentlicht: (2024)

Optimal Ground Station Selection for Low-Earth Orbiting Satellites
von: Eddy, Duncan, et al.
Veröffentlicht: (2024)

Enhanced Importance Sampling through Latent Space Exploration in Normalizing Flows
von: Kruse, Liam A., et al.
Veröffentlicht: (2025)

Zono-Conformal Prediction: Zonotope-Based Uncertainty Quantification for Regression and Classification Tasks
von: Lützow, Laura, et al.
Veröffentlicht: (2025)

Beyond Backpropagation: Optimization with Multi-Tangent Forward Gradients
von: Flügel, Katharina, et al.
Veröffentlicht: (2024)

Mitigating Gradient Overlap in Deep Residual Networks with Gradient Normalization for Improved Non-Convex Optimization
von: Yun, Juyoung
Veröffentlicht: (2024)

Imperfect World Models are Exploitable
von: Bhamidipaty, Logan Mondal, et al.
Veröffentlicht: (2026)

BetterBench: Assessing AI Benchmarks, Uncovering Issues, and Establishing Best Practices
von: Reuel, Anka, et al.
Veröffentlicht: (2024)

Elastic Multi-Gradient Descent for Parallel Continual Learning
von: Lyu, Fan, et al.
Veröffentlicht: (2024)

Stochastic Re-weighted Gradient Descent via Distributionally Robust Optimization
von: Kumar, Ramnath, et al.
Veröffentlicht: (2023)

AGSOA:Graph Neural Network Targeted Attack Based on Average Gradient and Structure Optimization
von: Chen, Yang, et al.
Veröffentlicht: (2024)

Gradient Flossing: Improving Gradient Descent through Dynamic Control of Jacobians
von: Engelken, Rainer
Veröffentlicht: (2023)

Randomness and Interpolation Improve Gradient Descent
von: Li, Jiawen, et al.
Veröffentlicht: (2025)

The Devil Is in Gradient Entanglement: Energy-Aware Gradient Coordinator for Robust Generalized Category Discovery
von: Zheng, Haiyang, et al.
Veröffentlicht: (2026)

Gradient Extrapolation-Based Policy Optimization
von: Swapnil, Ismam Nur, et al.
Veröffentlicht: (2026)

Policy Gradient for Robust Markov Decision Processes
von: Wang, Qiuhao, et al.
Veröffentlicht: (2024)

Gradient Regularized Natural Gradients
von: Dash, Satya Prakash, et al.
Veröffentlicht: (2026)

Scalable Ground Station Selection for Large LEO Constellations
von: Kim, Grace Ra, et al.
Veröffentlicht: (2025)

Gradient Inversion Transcript: Leveraging Robust Generative Priors to Reconstruct Training Data from Gradient Leakage
von: Chen, Xinping, et al.
Veröffentlicht: (2025)

Bayesian Natural Gradient Fine-Tuning of CLIP Models via Kalman Filtering
von: Abdi, Hossein, et al.
Veröffentlicht: (2025)

Regret Analysis of Policy Gradient Algorithm for Infinite Horizon Average Reward Markov Decision Processes
von: Bai, Qinbo, et al.
Veröffentlicht: (2023)

Stabilizing RNN Gradients through Pre-training
von: Herranz-Celotti, Luca, et al.
Veröffentlicht: (2023)

Reasoning as Gradient: Scaling MLE Agents Beyond Tree Search
von: Zhang, Yifei, et al.
Veröffentlicht: (2026)

GradientStabilizer:Fix the Norm, Not the Gradient
von: Huang, Tianjin, et al.
Veröffentlicht: (2025)

Robust Control with Gradient Uncertainty
von: Qi, Qian
Veröffentlicht: (2025)

Sequential Policy Gradient for Adaptive Hyperparameter Optimization
von: Li, Zheng, et al.
Veröffentlicht: (2025)

OGF: An Online Gradient Flow Method for Optimizing the Statistical Steady-State Time Averages of Unsteady Turbulent Flows
von: Hickling, Tom, et al.
Veröffentlicht: (2025)

Geometrically Inspired Kernel Machines for Collaborative Learning Beyond Gradient Descent
von: Kumar, Mohit, et al.
Veröffentlicht: (2024)

Delayed Random Partial Gradient Averaging for Federated Learning
von: Hu, Xinyi
Veröffentlicht: (2024)

Robust Finite-Memory Policy Gradients for Hidden-Model POMDPs
von: Galesloot, Maris F. L., et al.
Veröffentlicht: (2025)

GradientSpace: Unsupervised Data Clustering for Improved Instruction Tuning
von: Sridharan, Shrihari, et al.
Veröffentlicht: (2025)

Fast Explanations via Policy Gradient-Optimized Explainer
von: Pan, Deng, et al.
Veröffentlicht: (2024)

Revisiting the Initial Steps in Adaptive Gradient Descent Optimization
von: Abuduweili, Abulikemu, et al.
Veröffentlicht: (2024)

XGrad: Boosting Gradient-Based Optimizers With Weight Prediction
von: Guan, Lei, et al.
Veröffentlicht: (2023)

GIO: Gradient Information Optimization for Training Dataset Selection
von: Everaert, Dante, et al.
Veröffentlicht: (2023)

Turning Stale Gradients into Stable Gradients: Coherent Coordinate Descent with Implicit Landscape Smoothing for Lightweight Zeroth-Order Optimization
von: Liang, Chen, et al.
Veröffentlicht: (2026)

On Finding Small Hyper-Gradients in Bilevel Optimization: Hardness Results and Improved Analysis
von: Chen, Lesi, et al.
Veröffentlicht: (2023)

The Reciprocity Gradient
von: Lin, Yue, et al.
Veröffentlicht: (2026)