inamori https://blog.hatena.ne.jp/inamori/ inamori’s diary https://inamori.hateblo.jp/ 数学 プログラミング 前回とほとんど同じなのですが、 ηという学習率を掛けるところが違います。これは時間の関数になっていて、t = 1, 2, …に対し、恐らく単調減少になっているほうが収束が速くなると思われます。η= 1 次元 1000サンプル 10000サンプル 100000サンプル 2 0.0433 0.0147 0.0064 10 0.1718 0.0800 0.0369 100 0.4307 0.1888 0.0865 次元 1000サンプル 10000サンプル 100000サンプル 2 0.0149 0.0043 0.0013 10 0.0535 0.0148 0.0046 100 0.3538 0.0… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Finamori.hateblo.jp%2Fentry%2F20151212%2Fp1" title="機械学習（4） 確率的勾配降下法 - inamori’s diary" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://images-fe.ssl-images-amazon.com/images/I/51mk7Rnt1AL._SL75_.jpg Hatena Blog https://hatena.blog 2015-12-12 00:00:00 rich https://inamori.hateblo.jp/entry/20151212/p1 1.0 100%