white-azalea https://blog.hatena.ne.jp/white-azalea/ 技術をかじる猫 https://white-azalea.hatenablog.jp/ アルゴリズム 勉強 技術検証 white-azalea.hatenablog.jp これの続き。 逆伝播の説明を飲み込むのに超絶苦労したわ…数学力無い自分を恨むねぇ（汗 各種勾配は順伝播式を偏微分式計算する必要があり 入力にかかる重み勾配 前の出力にかける勾配 バイアス勾配 各時刻でも以下の勾配を計算する。 入力の勾配 前の時刻の出力の勾配 前の時刻の記憶セルの勾配 この微分をしなきゃいけない…うわぁ… ってことで、導出過程を端折ってしまうと 忘却ゲートは 入力ゲート 新しい記憶 出力ゲート 導出過程とか細かい論理とかはこれ参照。 これを見ながら頑張ればなんとか導出も理解できる。 はじめてのディープラーニング2 Pytho… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fwhite-azalea.hatenablog.jp%2Fentry%2F2021%2F11%2F15%2F214129" title="LSTM 作ってみた - 技術をかじる猫" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://m.media-amazon.com/images/I/51KHbQkRZvL._SL500_.jpg Hatena Blog https://hatena.blog 2021-11-15 21:41:29 rich https://white-azalea.hatenablog.jp/entry/2021/11/15/214129 1.0 100%