np2LKoo https://blog.hatena.ne.jp/np2LKoo/ クーの自由研究 https://np2lkoo.hatenablog.com/ 自己符号化器 自己符号化器-実験 おおまかな内容 いろいろな活性化関数がありますが、一般的には非線形関数です。線形関数を使うとどうなるのでしょうか。線形関数では何がだめなのか（適さない）のか実験します。 なぜやるのか・どうなると思うか 活性化関数が非線形であることは、学習に対してどのような効果があるか確認します。これもおおかた予想がつきますが、やってみないと実証できません。ボクすこしだけ気になります。 準備と実験のやり方 機械学習界隈では全く人気のない線形(Liner)関数を準備します。 そう！学校(?)で最初にならうグラフはこれだった気がします。 実験の結果 以下のようになりました。 まとめ 最初は「へぇ～線形関数でも学習に… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fnp2lkoo.hatenablog.com%2Fentry%2F2016%2F08%2F20%2F111051" title="自己符号化器の自由研究（その４） 関数が線形でも学習できる？ - クーの自由研究" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/n/np2LKoo/20160820/20160820110830.png Hatena Blog https://hatena.blog 2016-08-20 11:10:51 rich https://np2lkoo.hatenablog.com/entry/2016/08/20/111051 1.0 100%