Local Loss Optimization in the Infinite Width: Stable Parameterization of Predictive Coding Networks and Target Propagation
Fuente:
arXiv
Salvato in:
| Autori principali: | Ishikawa, Satoki, Yokota, Rio, Karakida, Ryo |
|---|---|
| Natura: | Preprint |
| Pubblicazione: |
2024
|
| Soggetti: | |
| Accesso online: | |
| Tags: |
Aggiungi Tag
Nessun Tag, puoi essere il primo ad aggiungerne!!
|
Documenti analoghi
On the Parameterization of Second-Order Optimization Effective Towards the Infinite Width
di: Ishikawa, Satoki, et al.
Pubblicazione: (2023)
di: Ishikawa, Satoki, et al.
Pubblicazione: (2023)
Recurrent Self-Attention Dynamics: An Energy-Agnostic Perspective from Jacobians
di: Tomihari, Akiyoshi, et al.
Pubblicazione: (2025)
di: Tomihari, Akiyoshi, et al.
Pubblicazione: (2025)
On the Infinite Width and Depth Limits of Predictive Coding Networks
di: Innocenti, Francesco, et al.
Pubblicazione: (2026)
di: Innocenti, Francesco, et al.
Pubblicazione: (2026)
Hierarchical Associative Memory, Parallelized MLP-Mixer, and Symmetry Breaking
di: Karakida, Ryo, et al.
Pubblicazione: (2024)
di: Karakida, Ryo, et al.
Pubblicazione: (2024)
Evolutionary Context Search for Automated Skill Acquisition
di: Sun, Qi, et al.
Pubblicazione: (2026)
di: Sun, Qi, et al.
Pubblicazione: (2026)
A Unified Physics-Informed Neural Network for Modeling Coupled Electro- and Elastodynamic Wave Propagation Using Three-Stage Loss Optimization
di: Bharadwaj, Suhas Suresh, et al.
Pubblicazione: (2026)
di: Bharadwaj, Suhas Suresh, et al.
Pubblicazione: (2026)
Efficient Online Learning with Predictive Coding Networks: Exploiting Temporal Correlations
di: Zadeh-Jousdani, Darius Masoum, et al.
Pubblicazione: (2025)
di: Zadeh-Jousdani, Darius Masoum, et al.
Pubblicazione: (2025)
Scaling Equilibrium Propagation to Deeper Neural Network Architectures
di: Elayedam, Sankar Vinayak, et al.
Pubblicazione: (2025)
di: Elayedam, Sankar Vinayak, et al.
Pubblicazione: (2025)
Recurrent Joint Embedding Predictive Architecture with Recurrent Forward Propagation Learning
di: Velarde, Osvaldo M, et al.
Pubblicazione: (2024)
di: Velarde, Osvaldo M, et al.
Pubblicazione: (2024)
A Stable, Fast, and Fully Automatic Learning Algorithm for Predictive Coding Networks
di: Salvatori, Tommaso, et al.
Pubblicazione: (2022)
di: Salvatori, Tommaso, et al.
Pubblicazione: (2022)
A Consolidated Volatility Prediction with Back Propagation Neural Network and Genetic Algorithm
di: Ke, Zong, et al.
Pubblicazione: (2024)
di: Ke, Zong, et al.
Pubblicazione: (2024)
EchoSpike Predictive Plasticity: An Online Local Learning Rule for Spiking Neural Networks
di: Graf, Lars, et al.
Pubblicazione: (2024)
di: Graf, Lars, et al.
Pubblicazione: (2024)
($\boldsymbolθ_l, \boldsymbolθ_u$)-Parametric Multi-Task Optimization: Joint Search in Solution and Infinite Task Spaces
di: Wei, Tingyang, et al.
Pubblicazione: (2025)
di: Wei, Tingyang, et al.
Pubblicazione: (2025)
Traces Propagation: Memory-Efficient and Scalable Forward-Only Learning in Spiking Neural Networks
di: Pes, Lorenzo, et al.
Pubblicazione: (2025)
di: Pes, Lorenzo, et al.
Pubblicazione: (2025)
The Enduring Dominance of Deep Neural Networks: A Critical Analysis of the Fundamental Limitations of Quantum Machine Learning and Spiking Neural Networks
di: Ishikawa, Takehiro
Pubblicazione: (2025)
di: Ishikawa, Takehiro
Pubblicazione: (2025)
Active Sensing with Predictive Coding and Uncertainty Minimization
di: Sharafeldin, Abdelrahman, et al.
Pubblicazione: (2023)
di: Sharafeldin, Abdelrahman, et al.
Pubblicazione: (2023)
Equilibrium Propagation Without Limits
di: Litman, Elon
Pubblicazione: (2025)
di: Litman, Elon
Pubblicazione: (2025)
Universality of Linear Recurrences Followed by Non-linear Projections: Finite-Width Guarantees and Benefits of Complex Eigenvalues
di: Orvieto, Antonio, et al.
Pubblicazione: (2023)
di: Orvieto, Antonio, et al.
Pubblicazione: (2023)
Sensitivity-Aware Mixed-Precision Quantization and Width Optimization of Deep Neural Networks Through Cluster-Based Tree-Structured Parzen Estimation
di: Azizi, Seyedarmin, et al.
Pubblicazione: (2023)
di: Azizi, Seyedarmin, et al.
Pubblicazione: (2023)
GRASP: GRouped Activation Shared Parameterization for Parameter-Efficient Fine-Tuning and Robust Inference of Transformers
di: Bal, Malyaban, et al.
Pubblicazione: (2025)
di: Bal, Malyaban, et al.
Pubblicazione: (2025)
Introduction to Predictive Coding Networks for Machine Learning
di: Stenlund, Mikko
Pubblicazione: (2025)
di: Stenlund, Mikko
Pubblicazione: (2025)
Incremental Affinity Propagation based on Cluster Consolidation and Stratification
di: Castano, Silvana, et al.
Pubblicazione: (2024)
di: Castano, Silvana, et al.
Pubblicazione: (2024)
Rethinking Recurrent Neural Networks for Time Series Forecasting: A Reinforced Recurrent Encoder with Prediction-Oriented Proximal Policy Optimization
di: Lai, Xin, et al.
Pubblicazione: (2026)
di: Lai, Xin, et al.
Pubblicazione: (2026)
Nature-Inspired Local Propagation
di: Betti, Alessandro, et al.
Pubblicazione: (2024)
di: Betti, Alessandro, et al.
Pubblicazione: (2024)
JPC: Flexible Inference for Predictive Coding Networks in JAX
di: Innocenti, Francesco, et al.
Pubblicazione: (2024)
di: Innocenti, Francesco, et al.
Pubblicazione: (2024)
Proxy Target: Bridging the Gap Between Discrete Spiking Neural Networks and Continuous Control
di: Xu, Zijie, et al.
Pubblicazione: (2025)
di: Xu, Zijie, et al.
Pubblicazione: (2025)
Repair Brain Damage: Real-Numbered Error Correction Code for Neural Network
di: Li, Ziqing, et al.
Pubblicazione: (2026)
di: Li, Ziqing, et al.
Pubblicazione: (2026)
Stochastic Quantum Spiking Neural Networks with Quantum Memory and Local Learning
di: Chen, Jiechen, et al.
Pubblicazione: (2025)
di: Chen, Jiechen, et al.
Pubblicazione: (2025)
Unsupervised Sparse Coding-based Spiking Neural Network for Real-time Spike Sorting
di: Melot, Alexis, et al.
Pubblicazione: (2025)
di: Melot, Alexis, et al.
Pubblicazione: (2025)
Dataset Optimization for Chronic Disease Prediction with Bio-Inspired Feature Selection
di: Dyoub, Abeer, et al.
Pubblicazione: (2023)
di: Dyoub, Abeer, et al.
Pubblicazione: (2023)
S-TLLR: STDP-inspired Temporal Local Learning Rule for Spiking Neural Networks
di: Apolinario, Marco Paul E., et al.
Pubblicazione: (2023)
di: Apolinario, Marco Paul E., et al.
Pubblicazione: (2023)
Evolving Multi-Channel Confidence-Aware Activation Functions for Missing Data with Channel Propagation
di: Sani, Naeem Shahabi, et al.
Pubblicazione: (2026)
di: Sani, Naeem Shahabi, et al.
Pubblicazione: (2026)
Leveraging Latent Evolutionary Optimization for Targeted Molecule Generation
di: N, Siddartha Reddy, et al.
Pubblicazione: (2024)
di: N, Siddartha Reddy, et al.
Pubblicazione: (2024)
Effective Regularization Through Loss-Function Metalearning
di: Gonzalez, Santiago, et al.
Pubblicazione: (2020)
di: Gonzalez, Santiago, et al.
Pubblicazione: (2020)
Optimizing Neural Network Performance and Interpretability with Diophantine Equation Encoding
di: Katende, Ronald
Pubblicazione: (2024)
di: Katende, Ronald
Pubblicazione: (2024)
Self-Motivated Growing Neural Network for Adaptive Architecture via Local Structural Plasticity
di: Jia, Yiyang, et al.
Pubblicazione: (2025)
di: Jia, Yiyang, et al.
Pubblicazione: (2025)
Supervised Spike Agreement Dependent Plasticity for Fast Local Learning in Spiking Neural Networks
di: S, Gouri Lakshmi, et al.
Pubblicazione: (2026)
di: S, Gouri Lakshmi, et al.
Pubblicazione: (2026)
DGDNN: Decoupled Graph Diffusion Neural Network for Stock Movement Prediction
di: You, Zinuo, et al.
Pubblicazione: (2024)
di: You, Zinuo, et al.
Pubblicazione: (2024)
Gradient-Based Neuroplastic Adaptation for Concurrent Optimization of Neuro-Fuzzy Networks
di: Hostetter, John Wesley, et al.
Pubblicazione: (2025)
di: Hostetter, John Wesley, et al.
Pubblicazione: (2025)
Learning Symbolic Model-Agnostic Loss Functions via Meta-Learning
di: Raymond, Christian, et al.
Pubblicazione: (2022)
di: Raymond, Christian, et al.
Pubblicazione: (2022)
Documenti analoghi
-
On the Parameterization of Second-Order Optimization Effective Towards the Infinite Width
di: Ishikawa, Satoki, et al.
Pubblicazione: (2023) -
Recurrent Self-Attention Dynamics: An Energy-Agnostic Perspective from Jacobians
di: Tomihari, Akiyoshi, et al.
Pubblicazione: (2025) -
On the Infinite Width and Depth Limits of Predictive Coding Networks
di: Innocenti, Francesco, et al.
Pubblicazione: (2026) -
Hierarchical Associative Memory, Parallelized MLP-Mixer, and Symmetry Breaking
di: Karakida, Ryo, et al.
Pubblicazione: (2024) -
Evolutionary Context Search for Automated Skill Acquisition
di: Sun, Qi, et al.
Pubblicazione: (2026)