bwgift https://blog.hatena.ne.jp/bwgift/ 地平線まで行ってくる。 https://bwgift.hatenadiary.jp/ PC Python お勉強 自然言語処理。さてと、特許の分類に興味があったけれども、日本の特許庁は不便なんで、手に入るもので挑戦しようと調査中。 今回は、形態素解析。日本語を分解して単語に分ける。単語を単位とすれば処理ができるようになる。よく見かけるのはMeCabやJanomeという形態素解析ライブラリ。巨大辞書Neologdが使えるMeCabは魅力的だが、今回は導入しやすいjanomeを採用。専門用語を考えると巨大辞書も魅力的だけれども事前検討してみるとjanomeのAnalyzerモジュールを活用すれば、そこそこいけそうな気がした。 この公式サイトや親切なサイトも参考にしつつ、テキスト前処理を組み立てる。先人の皆様あ… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fbwgift.hatenadiary.jp%2Fentry%2F2021%2F01%2F10%2F222019" title="文書を俯瞰　＃２ - 地平線まで行ってくる。" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2021-01-10 22:20:19 rich https://bwgift.hatenadiary.jp/entry/2021/01/10/222019 1.0 100%