y-tana https://blog.hatena.ne.jp/y-tana/ たなちゅ〜の備忘録 https://www.y-tana.net/ 読書メモ 情報理論 情報理論1 の読書メモ．著者は情報幾何（情報理論と微分幾何学とを併せた学問分野）の第一人者であるためか，さわりの情報量（§１）の説明が非常に明快で分かりやすい2．そのため以下に備忘を示す． 「§1.1：情報量とエントロピー」のメモ 情報に共通な本質：「情報とはわれわれに何事かを教えてくれるものであり，われわれの不確実な知識を確実にしてくれるものである」（P.11 より） 情報の量は，その情報をもらったことによって知識の不確実さがどのくらい減ったかで計ればよい（P.11 より） 情報量の加法性：情報は直接さらけ出そうと，ちょびりちょびり出そうとその量は変わらない（P.13 より） 情報の持つ情報… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fwww.y-tana.net%2Fentry%2F200101_Amari-InfoTheory" title="【読書メモ】情報理論（甘利, 1970）「§１：情報の数量的認識」 - たなちゅ〜の備忘録" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2020-01-01 22:56:16 rich https://www.y-tana.net/entry/200101_Amari-InfoTheory 1.0 100%