isobe324649 https://blog.hatena.ne.jp/isobe324649/ conceptualization https://isobe324649.hatenablog.com/ 全３回のシリーズパート２の本記事では、GPTの能力と可能性をAttention/Transformerの仕組みをふまえて考察します。 というつもりでしたが、凄く長くなってしまったのでパート2は以下の3回に分けようと思います。 （2.1）各技術の定性的な説明（本記事） （2.2）Transformerのアルゴリズム詳細 （2.3）GPTの能力と可能性について 2.1 各技術の定性的な説明 自然言語の構造を考えてみる まず我々が使う言語についてちょっと振り返るところから話を始めましょう。 文や文章は、おおもとのデータである文字から始まって、単語、文節、句、節、文、文章、さらにその上の意味、という風… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fisobe324649.hatenablog.com%2Fentry%2F2023%2F03%2F27%2F064121" title="GPTの仕組みと限界についての考察（2.1） - conceptualization" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/i/isobe324649/20230327/20230327010622.png Hatena Blog https://hatena.blog 2023-03-27 06:41:21 rich https://isobe324649.hatenablog.com/entry/2023/03/27/064121 1.0 100%