hogashi https://blog.hatena.ne.jp/hogashi/ hogashi.* https://blog.hog.as/ AI 日記 Google 検索で「青亜麻」を検索したところ、 Google 検索に据え付けの Gemini が、読みを「あまあま」として解説し始めた。 流石に違うんじゃないかと思って、あってる？ と聞くと、間違いでした、と言う。なぜ聞くとわかることが一発目に間違ったまま出てくるのか気になって、そのまま技術的に解説してもらった。hogashi-generated.hateblo.jp ざっくりとした理解しかできてないものの、 今の LLM の基本のつくりが文章を形態素解析のように区切ってトークン化して扱うものである 出力するときに、次の文字 (トークン) を作り出すにあたっては、局所的に推測するものである … 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fblog.hog.as%2Fentry%2F2026%2F08%2F07%2F103710" title="AIのぽんこつがなぜなのかを少し理解した / 仕組みが好き - hogashi.*" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/h/hogashi/20260806/20260806150510.png Hatena Blog https://hatena.blog 2026-08-07 10:37:10 rich https://blog.hog.as/entry/2026/08/07/103710 1.0 100%