takeda25 https://blog.hatena.ne.jp/takeda25/ アスペ日記 https://takeda25.hatenablog.jp/ Twitter 上で、 id:showyou さんがログデータの日中言語判別をしたいという話をしていたので、それについて。まず前提として、文字だけ見ても日本語と簡体字中国語（繁体字はもっと面倒だけど、ここではいったん棚上げ）を 100％判別することはできない。 というのは、簡体字中国語の文章であっても必ずしも簡体字を含むわけではないので。“真的？”（本当に？） “恭喜恭喜！”（おめでとう！）これらは典型的な例だが、実際はもっと長い簡体字を含まない文章でも実は中国語ということがあり得る。また、「カナがあれば日本語」という簡単な方法もあるが、全部漢字だから中国語というわけでもない。 「最低！」 「… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Ftakeda25.hatenablog.jp%2Fentry%2F20110131%2F1296485093" title="手抜き日中判別 - アスペ日記" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2011-01-31 23:44:53 rich https://takeda25.hatenablog.jp/entry/20110131/1296485093 1.0 100%