kagamiuta https://blog.hatena.ne.jp/kagamiuta/ かがぴーの雑記帳 https://kagamiuta.hatenadiary.org/ 研究 Mac NLP Perl 既に２年前にやったことですが、今回はpLSA（pLSI）というものに焦点を。 pLSA（なんと99年に発表された論文）は言語処理とかそういう分野に限定せず色々なところで応用の効く手法ですが、言語処理の場合、共起行列（単語文書行列）と呼ばれるものを前処理として作成しておく必要があります。なのでその部分のプログラムを。 その前に ： 共起行列（単語文書行列） なんじゃらほい？ 例えばある文書ファイルに、 こんにちは 今日の天気は 明日の天気は という感じで書いてあったとしましょう。 したら以下みたいな数字の羅列が共起行列になります。 0:1 1:1 2:1 3:1 4:1 5:1 2:1 3:1 … 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fkagamiuta.hatenadiary.org%2Fentry%2F20110609%2F1307550239" title="pLSA(pLSI)用共起行列の作成 - かがぴーの雑記帳" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2011-06-09 01:23:59 rich https://kagamiuta.hatenadiary.org/entry/20110609/1307550239 1.0 100%