Skip to content
Snippets Groups Projects
Verified Commit 7710b99c authored by iliya.saroukha's avatar iliya.saroukha :first_quarter_moon:
Browse files

fix: keeping momentum horizontal layout on same page

parent f3313c9a
Branches
No related tags found
No related merge requests found
Pipeline #32445 failed
...@@ -86,7 +86,7 @@ $$ ...@@ -86,7 +86,7 @@ $$
f(x, y) = x^2 + ky^2 \quad \forall k \in \mathbb{N} f(x, y) = x^2 + ky^2 \quad \forall k \in \mathbb{N}
$$ {#eq-func-bol} $$ {#eq-func-bol}
$\text{n.b.}$ : Le gradient $\nabla$ de la fonction ci-dessus est accentué dans **n.b.** : Le gradient $\nabla$ de la fonction ci-dessus est accentué dans
la direction de l'axe $y$ à l'aide du facteur $k = 5$. Ceci aura son importance la direction de l'axe $y$ à l'aide du facteur $k = 5$. Ceci aura son importance
pour lors de l'explication de la problématique des ravines ainsi que de la pour lors de l'explication de la problématique des ravines ainsi que de la
visualisation de la méthode d'**Adam**. visualisation de la méthode d'**Adam**.
...@@ -145,14 +145,14 @@ gradient simple. ...@@ -145,14 +145,14 @@ gradient simple.
:::: {#fig-momentum-gamma layout="[1, 1]"} :::: {#fig-momentum-gamma layout="[1, 1]"}
![$\gamma = 0.1$](./figs/f/momentum_gamma_1e-1.svg){#fig-gamma-01} ![$\gamma = 0.1$](./figs/f/momentum_gamma_1e-1.svg){#fig-gamma-01 width="90%"}
![$\gamma = 0.5$](./figs/f/momentum_gamma_5e-1.svg){#fig-gamma-05} ![$\gamma = 0.5$](./figs/f/momentum_gamma_5e-1.svg){#fig-gamma-05 width="90%"}
Introduction du paramètre _momentum_ $\gamma$ Introduction du paramètre _momentum_ $\gamma$
:::: ::::
Pour pouvoir mieux voir la différence avec les méthode simple, nous allons Pour pouvoir mieux voir la différence avec la méthode simple, nous allons
définir la valeur de $\lambda = 0.9$. Grâce à cette valeur nous pouvons à présent définir la valeur de $\lambda = 0.9$. Grâce à cette valeur nous pouvons à présent
réellement apprécier la trajectoire totalement différente produite par la réellement apprécier la trajectoire totalement différente produite par la
descente **Momentum**. descente **Momentum**.
...@@ -304,10 +304,16 @@ arrive très rapidement à descendre dans la "vallée", au bout d'une **seule ...@@ -304,10 +304,16 @@ arrive très rapidement à descendre dans la "vallée", au bout d'une **seule
itération** suite au fait que le gradient est très prononcé dans la direction itération** suite au fait que le gradient est très prononcé dans la direction
de l'axe $y$. Cependant pour pouvoir par la suite converger vers le minimum, de l'axe $y$. Cependant pour pouvoir par la suite converger vers le minimum,
72 itérations supplémentaires sont nécessaires car le gradient dans la direction 72 itérations supplémentaires sont nécessaires car le gradient dans la direction
de l'axe $x$ est comparativement très faible. de l'axe $x$ est comparativement très faible. Ceci implique donc le fait que
la convergence n'est pas forcément garantie dépendamment de la fonction sur
laquelle la descente est effectuée.
## Plateaux ## Plateaux
Concernant la problématique des plateaux, celle-ci est assez explicite. Si
$||\nabla{f}|| \approx 0$, alors les diverses méthodes ne pourront pas avancer
fonction La fonction que l'on a nommé le "puit"
## Minimums locaux ## Minimums locaux
# Descentes sur diverses fonctions # Descentes sur diverses fonctions
......
0% Loading or .
You are about to add 0 people to the discussion. Proceed with caution.
Please register or to comment