HTN20190109 https://blog.hatena.ne.jp/HTN20190109/ HTN20190109の日記 https://htn20190109.hatenablog.com/ DL 相対エントロピーとも呼ばれる真の分布とモデルの分布がどれだけ異なっているかを示すKLダイバージェンスは常に負でない値となる(ギブスの不等式)(交差エントロピー) - (エントロピー)に分解できる相互情報量とKLダイバージェンスの関係式 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fhtn20190109.hatenablog.com%2Fentry%2F2025%2F07%2F27%2F203332" title="KLダイバージェンス(Kullback–Leibler divergence) - HTN20190109の日記" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2025-07-27 20:33:32 rich https://htn20190109.hatenablog.com/entry/2025/07/27/203332 1.0 100%