LoginSignup
0
2

More than 3 years have passed since last update.

頑張って最適化関数を作ってみたけど上手くいかなかった話

Posted at

参考

実行ソース

対象

  • 自己満

何したの??

参考にさせていただいたURLを元に
- SGD
- MomentumSGD
- AdaGrad
- RMSprop
をpythonで書いてみて

この記事にある (https://qiita.com/Akidukin14/items/4cf3fd1a065726450e4d)
- sphere関数
- losenbrock関数
- styblinskitang関数
に適用させてみてどのような動きをするのか見てみたかった

それぞれの偏微分式は自分で解いたのでそこも悪いのかも

結果

sphere_optim.png
losenbrock_optim.pngstyblinskitang_optim.png

まとめ

MomentumSGDが特にひどい、全部どこいくねーんと
疲れたのでもういいやと思いました まる

0
2
0

Register as a new user and use Qiita more conveniently

  1. You get articles that match your needs
  2. You can efficiently read back useful information
  3. You can use dark theme
What you can do with signing up
0
2