TadaoYamaoka https://blog.hatena.ne.jp/TadaoYamaoka/ TadaoYamaokaの開発日記 https://tadaoyamaoka.hatenablog.com/ 昨年の世界コンピュータ将棋選手権、電竜戦では、モデルサイズを大きくすることで強くすることを試みたが、精度は上がるものの探索速度が落ちることで強くできなかった。そこで、現在一番強い40ブロック512フィルタのモデルサイズで、モデルアーキテクチャを変えることで強くすることを試みた。 アーキテクチャ変更 電竜戦の後、様々なモデルアーキテクチャの変更を実験した。 Gated Attention 以前に、記事にしたGated Attentionはわずかに効果があるため取り入れた。 Attention層で、入力に応じた要素ごとの重みを乗じることで、重要でない駒の関係にSoftmaxの確率が割り当てられるこ… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Ftadaoyamaoka.hatenablog.com%2Fentry%2F2026%2F03%2F21%2F133131" title="【dlshogi】ResNet+Transformerモデルのアーキテクチャ改良 - TadaoYamaokaの開発日記" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/T/TadaoYamaoka/20260321/20260321121605.png Hatena Blog https://hatena.blog 2026-03-21 13:31:31 rich https://tadaoyamaoka.hatenablog.com/entry/2026/03/21/133131 1.0 100%