Discussion:Rétropropagation du gradient

g' est-elle bien la dérivée de la fonction g?

Justement c'est ce que je me demandais il faudrait préciser --Pparent (d) 20 avril 2011 à 23:45 (CEST)

moins dans la dérivée de l'energie?

Je me demande pourquoi il n'y a pas de moins dans la dérivée de l'energie puisqu'on dérive (1/2)*sum(ti-yi)² ce qui donne -sum((yi)'*(t1-y1)) non?

Symbole de la dérivée partielle manquant devant les poids dans les formules de rétro propagation?

Tout est dit dans le titre ^^

Je me demande aussi pourquoi à la fin lors de la modification des poids on ajoute le terme à droite au lieu de le soustraire, sachant qu'il correspond à la dérivée partielle de l'erreur par rapport au poids, et donc si celle si est positive il vaut mieux réduire le poids?

Dérivées partielles nulles ?

Bonjour,

Dans la démonstration de l'algorithme de rétropropagation, j'ai l'impression que les valeurs ${\frac {\partial w_{ab}^{(x)}}{\partial w_{cd}^{(y)}}}$ valent 1 si $x=y$, $a=c$ et $b=d$ et 0 dans tous les autres cas. Comme si il n'y avait pas de dépendances entres elles.

Cependant, nous avons la relation dynamique de mise à jours des poids: $w_{ij}^{(l)}(t+1)=w_{ij}^{(l)}(t)-\lambda e_{i}^{(l)}(t)x_{j}^{(l-1)}$ n'est-pas ? Et donc comme le calcul de $e_{i}^{(l)}$ fait intervenir des poids, pour moi, il y a des dépendances.

Réfléchi** Ou alors ces mises à jour se font hors système, quelque chose comme ça ... Pourrais-je avoir un éclaircissement sur ce point ? Merci d'avance.

--Jean-Luc Amitousa (discuter) 10 avril 2021 à 10:41 (CEST)