misos https://blog.hatena.ne.jp/misos/ めも https://paper.hatenadiary.jp/ 論文めも 深層学習 機械学習 概要 元論文 関連研究 モデル（の学習した知識）の蒸留 問題設定・記法 手法 モデルの初期値が固定されている場合 モデルの初期値がランダムに決定される場合 実験で比較に用いるもの 実験 実装 個人用のメモ。 概要 画像分類モデルの訓練にて、学習に効果の高い画像と学習率を得る手法を提案 モデルの初期パラメータが生成される分布と学習エポック数に基づいて画像と学習率を得る CIFAR-10にて100の生成画像からAccuracy 50%越え 現実的な応用の中でこの手法を用いて得られた画像・学習率が有用になるシチュエーションとしてどのようなものがあるかは未検討 元論文 タイトル: Dataset Di… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fpaper.hatenadiary.jp%2Fentry%2F201901050000" title=" 論文メモ： Dataset Distillation について - めも" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/m/misos/20190127/20190127132139.png Hatena Blog https://hatena.blog 2019-01-11 00:00:00 rich https://paper.hatenadiary.jp/entry/201901050000 1.0 100%