misos https://blog.hatena.ne.jp/misos/ めも https://paper.hatenadiary.jp/ 機械学習 python 深層学習 パラメータの初期化 Xavier Initialization He Initialization Glorot initialisation パラメータ更新の手法 Vanilla update Momentum Nesterov Momentum Nadam AdaGrad AdaDelta Adam(Adaptive Moment Estimation) RMSprop Eve その他多数 自分で定義した目的関数を使用して学習 その他 使う機会がありそうなのでメモ。 ただ正直目的関数を変更することはあっても、パラメータ更新手法は滅多に変更しないので資料も添付しない、存在だけ知っておく程度。… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fpaper.hatenadiary.jp%2Fentry%2F2017%2F01%2F24%2F205125" title="ディープラーニングのパラメータ設定・更新方法に関するメモ - めも" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://images-fe.ssl-images-amazon.com/images/I/512ru2i5gyL._SL160_.jpg Hatena Blog https://hatena.blog 2017-01-24 20:51:25 rich https://paper.hatenadiary.jp/entry/2017/01/24/205125 1.0 100%