Saved in:
Bibliographic Details
Main Author: Dormoy, Nicolas Antoine Michel
Format: Recurso digital
Language:
Published: Zenodo 2025
Online Access:https://doi.org/10.5281/zenodo.17495637
Tags: Add Tag
No Tags, Be the first to tag this record!
Table of Contents:
  • <p>Dans cet article nous etudions un systeme combinant deux modes d'apprentissage.<br>Pour des processus stationnaires et non-deterministes, nous avons propagation statistique des moments d'ordre 2 en profondeur du reseau.<br>Nous pouvons definir une matrice de variance covariance sur une base KL (processus test).<br>Cette base va etre invariante couche-par-couche, a un facteur d'echelle pres.<br>Nous definissons des embeddings comme suivant une diffusion stochastique sur l'espace des processus test.<br>Nous obtenons une selection naturelle sur les processus via des seuils de variance appliques a des projections de la matrice sigma.<br>L'imposition de logiques a long terme, couplees a des garanties d'emergence logique, permet de definir des contraintes a appliquer a la matrice sigma, et au reseau lui-meme via des perturbations pour recouvrer la structure de correlation desiree.<br>Nous montrons dans ce cadre l'existence de deux noyaux de gradients, permettant d'effectuer une double optimisation, dans l'espace iid et dans l'espace des processus test.<br>L'application de regles logiques explicites sur les processus de diffusion ouvre la porte a une meilleure interpretabilite des reseaux de neurones.</p>