ryoryo-ueda https://blog.hatena.ne.jp/ryoryo-ueda/ 草茫茫 https://weeeeddie.hatenablog.com/ 背景 言語学分野では、Zipfの法則（Zipf's law）と呼ばれる統計的普遍性質が知られています。 Zipfの法則とは、出現頻度が $r$ 番目に多い単語について、その出現頻度がおおよそ $\dfrac{1}{r}$ に比例するという経験則です。 すなわち $r$ 番目の単語の出現頻度を $f(r)$ としたとき、 $$ f(r) \propto r^{-\alpha} $$ が成り立つという経験則です（ここで $\alpha \approx 1$ ですが、厳密には $\sum_{r=1}^{\infty} f(r) < \infty$ となるために $\alpha>1$ である必要があり… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fweeeeddie.hatenablog.com%2Fentry%2F2024%2F10%2F12%2F181443" title="Zipfの法則って結局どういう扱いなんだっけ？今更他人に聞けないのでPiantadosi (2014)を読んでこっそり勉強 - 草茫茫" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2024-10-12 18:14:43 rich https://weeeeddie.hatenablog.com/entry/2024/10/12/181443 1.0 100%