Buchumschlag

Regime Change Hypothesis: Foundations for Decoupled Dynamics in Neural Network Training

Fuente: arXiv

Gespeichert in:

Bibliographische Detailangaben
Hauptverfasser:	Pérez-Corral, Cristian, Fernández-Hernández, Alberto, Mestre, Jose I., Dolz, Manuel F., Duato, Jose, Quintana-Ortí, Enrique S.
Format:	Preprint
Veröffentlicht:	2026
Schlagworte:	Machine Learning Artificial Intelligence 68 I.2.0
Online-Zugang:	Acceder al recurso
Tags:	Tag hinzufügen Keine Tags, Fügen Sie den ersten Tag hinzu!

Ähnliche Einträge

Sinusoidal Initialization, Time for a New Start
von: Fernández-Hernández, Alberto, et al.
Veröffentlicht: (2025)

GLAI: GreenLightningAI for Accelerated Training through Knowledge Decoupling
von: Mestre, Jose I., et al.
Veröffentlicht: (2025)

OUI as a Structural Observable: Towards an Activation-Centric View of Neural Network Training
von: Fernández-Hernández, Alberto, et al.
Veröffentlicht: (2026)

OUIDecay: Adaptive Layer-wise Weight Decay for CNNs Using Online Activation Patterns
von: Fernández-Hernández, Alberto, et al.
Veröffentlicht: (2026)

FedOUI: OUI-Guided Client Weighting for Federated Aggregation
von: Fernández-Hernández, Alberto, et al.
Veröffentlicht: (2026)

When Learning Rates Go Wrong: Early Structural Signals in PPO Actor-Critic
von: Fernández-Hernández, Alberto, et al.
Veröffentlicht: (2026)

FedSQ: Optimized Weight Averaging via Fixed Gating
von: Pérez-Corral, Cristian, et al.
Veröffentlicht: (2026)

OUI Need to Talk About Weight Decay: A New Perspective on Overfitting Detection
von: Fernández-Hernández, Alberto, et al.
Veröffentlicht: (2025)

Customizing Graph Neural Networks using Path Reweighting
von: Chen, Jianpeng, et al.
Veröffentlicht: (2021)

ECG-FM: An Open Electrocardiogram Foundation Model
von: McKeen, Kaden, et al.
Veröffentlicht: (2024)

A ZeNN architecture to avoid the Gaussian trap
von: Carvalho, Luís, et al.
Veröffentlicht: (2025)

The Curious Case of In-Training Compression of State Space Models
von: Chahine, Makram, et al.
Veröffentlicht: (2025)

NeuBTF: Neural fields for BTF encoding and transfer
von: Rodriguez-Pardo, Carlos, et al.
Veröffentlicht: (2023)

A Survey on Dynamic Neural Networks: from Computer Vision to Multi-modal Sensor Fusion
von: Montello, Fabio, et al.
Veröffentlicht: (2025)

Refresh-Scaling the Memory of Balanced Adam
von: Fernández-Hernández, Alberto, et al.
Veröffentlicht: (2026)

$λ$-GELU: Learning Gating Hardness for Controlled ReLU-ization in Deep Networks
von: Pérez-Corral, Cristian, et al.
Veröffentlicht: (2026)

StableGrad: Backward Scale Control without Batch Normalization
von: Mestre, Jose I., et al.
Veröffentlicht: (2026)

Why Adam Works Better with $β_1 = β_2$: The Missing Gradient Scale Invariance Principle
von: Fernández-Hernández, Alberto, et al.
Veröffentlicht: (2026)

A Survey of Sim-to-Real Methods in RL: Progress, Prospects and Challenges with Foundation Models
von: Da, Longchao, et al.
Veröffentlicht: (2025)

An Automatic Text Classification Method Based on Hierarchical Taxonomies, Neural Networks and Document Embedding: The NETHIC Tool
von: Lomasto, Luigi, et al.
Veröffentlicht: (2026)

The Efficiency Attenuation Phenomenon: A Computational Challenge to the Language of Thought Hypothesis
von: Zhang, Di
Veröffentlicht: (2026)

GLL: A Differentiable Graph Learning Layer for Neural Networks
von: Brown, Jason, et al.
Veröffentlicht: (2024)

UMat: Uncertainty-Aware Single Image High Resolution Material Capture
von: Rodriguez-Pardo, Carlos, et al.
Veröffentlicht: (2023)

Emergence of Goal-Directed Behaviors via Active Inference with Self-Prior
von: Kim, Dongmin, et al.
Veröffentlicht: (2025)

Single-image Reflectance and Transmittance Estimation from Any Flatbed Scanner
von: Rodriguez-Pardo, Carlos, et al.
Veröffentlicht: (2025)

A multi-centre, multi-device benchmark dataset for landmark-based comprehensive fetal biometry
von: Di Vece, Chiara, et al.
Veröffentlicht: (2025)

Response Uncertainty and Probe Modeling: Two Sides of the Same Coin in LLM Interpretability?
von: Wang, Yongjie, et al.
Veröffentlicht: (2025)

Beyond validation loss: Clinically-tailored optimization metrics improve a model's clinical performance
von: Delahunt, Charles B., et al.
Veröffentlicht: (2026)

Knowledge Abstraction for Knowledge-based Semantic Communication: A Generative Causality Invariant Approach
von: Nguyen, Minh-Duong, et al.
Veröffentlicht: (2025)

Dancing in the Shadows: Harnessing Ambiguity for Fairer Classifiers
von: Barrainkua, Ainhize, et al.
Veröffentlicht: (2024)

Instilling Organisational Values in Firefighters through Simulation-Based Training
von: Osman, Nardine, et al.
Veröffentlicht: (2025)

TraXion: Rethinking Pre-training Frameworks for Mobility and Beyond
von: Hsu, Shang-Ling, et al.
Veröffentlicht: (2026)

SafeAnchor: Preventing Cumulative Safety Erosion in Continual Domain Adaptation of Large Language Models
von: Guo, Dongxin, et al.
Veröffentlicht: (2026)

Active Inference with a Self-Prior in the Mirror-Mark Task
von: Kim, Dongmin, et al.
Veröffentlicht: (2026)

Reference-Guided Verdict: LLMs-as-Judges in Automatic Evaluation of Free-Form QA
von: Badshah, Sher, et al.
Veröffentlicht: (2024)

Eye-gaze Guided Multi-modal Alignment for Medical Representation Learning
von: Ma, Chong, et al.
Veröffentlicht: (2024)

When Your Own Output Becomes Your Training Data: Noise-to-Meaning Loops and a Formal RSI Trigger
von: Ando, Rintaro
Veröffentlicht: (2025)

Cost-Effective Attention Mechanisms for Low Resource Settings: Necessity & Sufficiency of Linear Transformations
von: Hosseini, Peyman, et al.
Veröffentlicht: (2024)

Graph Neural Networks Need Cluster-Normalize-Activate Modules
von: Skryagin, Arseny, et al.
Veröffentlicht: (2024)

Few-Class Arena: A Benchmark for Efficient Selection of Vision Models and Dataset Difficulty Measurement
von: Cao, Bryan Bo, et al.
Veröffentlicht: (2024)