necoffee https://blog.hatena.ne.jp/necoffee/ necoffeeのにっき https://necoffee.hatenadiary.org/ 人工知能 今日は自然言語処理の基本n-gramについて勉強した。n-gramというのは日本語文等の自然言語を解析するために使われる手法の一つで、例えば3-gramならある文章を３文字づつに区切って解析する。3-gramの例（『例えばこんな風に行われる』という文の3-gram表現): 例えば えばこ ばこん こんな んな風 な風に 風に行 に行わ 行われ われる れる。 n-gramによって解析する内容は単純で、区切った文の中で何回同じ文がでてきたかを数えるというもの。上の例では、１つも同じ文がでてこなかった(『例えば』と『えばこ』とでは一致しないというように）のであんまり意味がないけど、解析する文が長く… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fnecoffee.hatenadiary.org%2Fentry%2F20070806%2F1186410705" title="n-gramメモ - necoffeeのにっき" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2007-08-06 23:31:45 rich https://necoffee.hatenadiary.org/entry/20070806/1186410705 1.0 100%