<?xml version="1.0" encoding="utf-8" standalone="yes"?>
<oembed>
  <author_name>albatrosary</author_name>
  <author_url>https://blog.hatena.ne.jp/albatrosary/</author_url>
  <blog_title>albatrosary's blog</blog_title>
  <blog_url>https://albatrosary.hateblo.jp/</blog_url>
  <categories>
    <anon>AI</anon>
  </categories>
  <description>はじめに 大規模言語モデル（LLM）がどのように学習し、コードを生成し、予測を行うのかについて考察する。特に、LLM の「予測」の概念と、それが人間の判断と類似している点について議論する。また、LLM がどのように誤りを生じるのか、そしてその限界についても触れる。 1. LLM の学習の仕組み LLM は、膨大なデータを学習することで、自然言語やプログラミング言語のパターンを把握する。学習の流れは以下の通り。 学習データの収集 書籍、論文、Web記事、オープンソースのコードなど、多様なテキストデータを収集。 コードに関しては、GitHub のオープンソースリポジトリなどが参考にされる。 トーク…</description>
  <height>190</height>
  <html>&lt;iframe src=&quot;https://hatenablog-parts.com/embed?url=https%3A%2F%2Falbatrosary.hateblo.jp%2Fentry%2F2025%2F03%2F16%2F070934&quot; title=&quot; 深層学習解剖: 大規模言語モデルの限界と可能性 - albatrosary&amp;#39;s blog&quot; class=&quot;embed-card embed-blogcard&quot; scrolling=&quot;no&quot; frameborder=&quot;0&quot; style=&quot;display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;&quot;&gt;&lt;/iframe&gt;</html>
  <image_url></image_url>
  <provider_name>Hatena Blog</provider_name>
  <provider_url>https://hatena.blog</provider_url>
  <published>2025-03-16 07:09:34</published>
  <title> 深層学習解剖: 大規模言語モデルの限界と可能性</title>
  <type>rich</type>
  <url>https://albatrosary.hateblo.jp/entry/2025/03/16/070934</url>
  <version>1.0</version>
  <width>100%</width>
</oembed>
