GDNSQ: Gradual Differentiable Noise Scale Quantization for Low-bit Neural Networks
Fuente:
arXiv
Salvato in:
| Autori principali: | Salishev, Sergey, Akhremchik, Ian |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2025
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
The Non-Linearity Perturbation Threshold: Width Scaling and Landscape Bifurcations in Deep Learning
di: Alexander, Michael
Pubblicazione: (2026)
di: Alexander, Michael
Pubblicazione: (2026)
CAO: Curvature-Adaptive Optimization via Periodic Low-Rank Hessian Sketching
di: Du, Wenzhang
Pubblicazione: (2025)
di: Du, Wenzhang
Pubblicazione: (2025)
Ghosts of Softmax: Complex Singularities That Limit Safe Step Sizes in Cross-Entropy
di: Sao, Piyush
Pubblicazione: (2026)
di: Sao, Piyush
Pubblicazione: (2026)
Inter-Layer Hessian Analysis of Neural Networks with DAG Architectures
di: Bolshim, Maxim, et al.
Pubblicazione: (2026)
di: Bolshim, Maxim, et al.
Pubblicazione: (2026)
i-DEQ: A stable inertial deep equilibrium model for image restoration
di: Clerc, Antonin, et al.
Pubblicazione: (2026)
di: Clerc, Antonin, et al.
Pubblicazione: (2026)
Differentiable Optimization Layers for Guaranteed Fairness in Deep Learning
di: Troxell, David, et al.
Pubblicazione: (2026)
di: Troxell, David, et al.
Pubblicazione: (2026)
Neural Green's Operators for Parametric Partial Differential Equations
di: Melchers, Hugo, et al.
Pubblicazione: (2024)
di: Melchers, Hugo, et al.
Pubblicazione: (2024)
Stochastic Estimation of the Layer-wise Hessian Trace for Monitoring Neural-network Training
di: Bolshim, Maxim, et al.
Pubblicazione: (2026)
di: Bolshim, Maxim, et al.
Pubblicazione: (2026)
Refining Graphical Neural Network Predictions Using Flow Matching for Optimal Power Flow with Constraint-Satisfaction Guarantee
di: Khanal, Kshitiz
Pubblicazione: (2025)
di: Khanal, Kshitiz
Pubblicazione: (2025)
Physics Informed Differentiable Solvers for Learning Parametric Solution Manifolds in Heterogeneous Physical Systems
di: Panahi, Milad, et al.
Pubblicazione: (2026)
di: Panahi, Milad, et al.
Pubblicazione: (2026)
Linear-Nonlinear Fusion Neural Operator for Partial Differential Equations
di: Wu, Heng, et al.
Pubblicazione: (2026)
di: Wu, Heng, et al.
Pubblicazione: (2026)
Sparse Training of Neural Networks based on Multilevel Mirror Descent
di: Lunk, Yannick, et al.
Pubblicazione: (2026)
di: Lunk, Yannick, et al.
Pubblicazione: (2026)
Local properties of neural networks through the lens of layer-wise Hessians
di: Bolshim, Maxim, et al.
Pubblicazione: (2025)
di: Bolshim, Maxim, et al.
Pubblicazione: (2025)
Multi-Objective Optimization with Desirability and Morris-Mitchell Criterion
di: Bartz-Beielstein, Thomas, et al.
Pubblicazione: (2025)
di: Bartz-Beielstein, Thomas, et al.
Pubblicazione: (2025)
On the Convergence Behavior of Preconditioned Gradient Descent Toward the Rich Learning Regime
di: Jiang, Shuai, et al.
Pubblicazione: (2026)
di: Jiang, Shuai, et al.
Pubblicazione: (2026)
Machine Learning Algorithms for Improving Black Box Optimization Solvers
di: Kimiaei, Morteza, et al.
Pubblicazione: (2025)
di: Kimiaei, Morteza, et al.
Pubblicazione: (2025)
Interior-Point Vanishing Problem in Semidefinite Relaxations for Neural Network Verification
di: Ueda, Ryota, et al.
Pubblicazione: (2025)
di: Ueda, Ryota, et al.
Pubblicazione: (2025)
Data-induced multiscale losses and efficient multirate gradient descent schemes
di: He, Juncai, et al.
Pubblicazione: (2024)
di: He, Juncai, et al.
Pubblicazione: (2024)
Application of Sensitivity Analysis Methods for Studying Neural Network Models
di: Miao, Jiaxuan, et al.
Pubblicazione: (2025)
di: Miao, Jiaxuan, et al.
Pubblicazione: (2025)
Deep Networks are Reproducing Kernel Chains
di: Heeringa, Tjeerd Jan, et al.
Pubblicazione: (2025)
di: Heeringa, Tjeerd Jan, et al.
Pubblicazione: (2025)
Implicit Bias and Invariance: How Hopfield Networks Efficiently Learn Graph Orbits
di: Murray, Michael, et al.
Pubblicazione: (2025)
di: Murray, Michael, et al.
Pubblicazione: (2025)
Complex-valued convolutional neural network classification of hand gesture from radar images
di: Khandan, Shokooh
Pubblicazione: (2024)
di: Khandan, Shokooh
Pubblicazione: (2024)
Verifiable Fine-Tuning for LLMs: Zero-Knowledge Training Proofs Bound to Data Provenance and Policy
di: Akgul, Hasan, et al.
Pubblicazione: (2025)
di: Akgul, Hasan, et al.
Pubblicazione: (2025)
Mathematical analysis of the gradients in deep learning
di: Dereich, Steffen, et al.
Pubblicazione: (2025)
di: Dereich, Steffen, et al.
Pubblicazione: (2025)
Universal Neural Optimal Transport
di: Geuter, Jonathan, et al.
Pubblicazione: (2022)
di: Geuter, Jonathan, et al.
Pubblicazione: (2022)
Setwise Coordinate Descent for Dual Asynchronous Decentralized Optimization
di: Costantini, Marina, et al.
Pubblicazione: (2025)
di: Costantini, Marina, et al.
Pubblicazione: (2025)
NeurOptimisation: The Spiking Way to Evolve
di: Cruz-Duarte, Jorge Mario, et al.
Pubblicazione: (2025)
di: Cruz-Duarte, Jorge Mario, et al.
Pubblicazione: (2025)
Bed-Attached Vibration Sensor System: A Machine Learning Approach for Fall Detection in Nursing Homes
di: Bartz-Beielstein, Thomas, et al.
Pubblicazione: (2024)
di: Bartz-Beielstein, Thomas, et al.
Pubblicazione: (2024)
Simplifying Hyperparameter Tuning in Online Machine Learning -- The spotRiverGUI
di: Bartz-Beielstein, Thomas
Pubblicazione: (2024)
di: Bartz-Beielstein, Thomas
Pubblicazione: (2024)
PyEPO: A PyTorch-based End-to-End Predict-then-Optimize Library for Linear and Integer Programming
di: Tang, Bo, et al.
Pubblicazione: (2022)
di: Tang, Bo, et al.
Pubblicazione: (2022)
Kourkoutas-Beta: A Sunspike-Driven Adam Optimizer with Desert Flair
di: Kassinos, Stavros C.
Pubblicazione: (2025)
di: Kassinos, Stavros C.
Pubblicazione: (2025)
Benchmarking Generative AI Against Bayesian Optimization for Constrained Multi-Objective Inverse Design
di: Awan, Muhammad Bilal, et al.
Pubblicazione: (2025)
di: Awan, Muhammad Bilal, et al.
Pubblicazione: (2025)
Mathematical artificial data for operator learning
di: Wu, Heng, et al.
Pubblicazione: (2025)
di: Wu, Heng, et al.
Pubblicazione: (2025)
A Constraint-Preserving Neural Network Approach for Solving Mean-Field Games Equilibrium
di: Liu, Jinwei, et al.
Pubblicazione: (2025)
di: Liu, Jinwei, et al.
Pubblicazione: (2025)
Exploring specialization and sensitivity of convolutional neural networks in the context of simultaneous image augmentations
di: Kharyuk, Pavel, et al.
Pubblicazione: (2025)
di: Kharyuk, Pavel, et al.
Pubblicazione: (2025)
Limitations of Scalarisation in MORL: A Comparative Study in Discrete Environments
di: Shah, Muhammad Sa'ood, et al.
Pubblicazione: (2025)
di: Shah, Muhammad Sa'ood, et al.
Pubblicazione: (2025)
IGT-OMD: Implicit Gradient Transport for Decision-Focused Learning under Delayed Feedback
di: Amoh, Benjamin, et al.
Pubblicazione: (2026)
di: Amoh, Benjamin, et al.
Pubblicazione: (2026)
Alternately-optimized SNN method for acoustic scattering problem in unbounded domain
di: Song, Haoming, et al.
Pubblicazione: (2025)
di: Song, Haoming, et al.
Pubblicazione: (2025)
Active Learning for Conditional Generative Compressed Sensing
di: DeLise, Alexander, et al.
Pubblicazione: (2026)
di: DeLise, Alexander, et al.
Pubblicazione: (2026)
Distributionally Robust Geometric Joint Chance-Constrained Optimization: Neurodynamic Approaches
di: Valli, Ange, et al.
Pubblicazione: (2026)
di: Valli, Ange, et al.
Pubblicazione: (2026)
Documenti analoghi
-
The Non-Linearity Perturbation Threshold: Width Scaling and Landscape Bifurcations in Deep Learning
di: Alexander, Michael
Pubblicazione: (2026) -
CAO: Curvature-Adaptive Optimization via Periodic Low-Rank Hessian Sketching
di: Du, Wenzhang
Pubblicazione: (2025) -
Ghosts of Softmax: Complex Singularities That Limit Safe Step Sizes in Cross-Entropy
di: Sao, Piyush
Pubblicazione: (2026) -
Inter-Layer Hessian Analysis of Neural Networks with DAG Architectures
di: Bolshim, Maxim, et al.
Pubblicazione: (2026) -
i-DEQ: A stable inertial deep equilibrium model for image restoration
di: Clerc, Antonin, et al.
Pubblicazione: (2026)