bwgift https://blog.hatena.ne.jp/bwgift/ 地平線まで行ってくる。 https://bwgift.hatenadiary.jp/ LLM Colab Python 自然言語処理 gemma-3-270m-itはコンパクトで、Googleさんからもfull_finetuneするコードが公開されています。〇〇風なチューニングではなく、QAセットで情報追加にチャレンジしてみます。ベースはGoogleさんが提供したColabノートを利用します。ColabのL4環境で実行します。 コンピュータサイエンスの番号選択式回答とSQL式回答のデータセットを２つhugginfaceからお借りし、整形してが5ehochs学習させました。出力のフォーマットは整います。短い学習でもいい感じの出力が得られます。SQLはそれらしい式がでますが、完全な正解には、もっとがっつり学習データが必要なのかも… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fbwgift.hatenadiary.jp%2Fentry%2F2025%2F08%2F23%2F145042" title="gemma-3-270m-itをColabでfull_finetune #2 - 地平線まで行ってくる。" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/b/bwgift/20250823/20250823113404.png Hatena Blog https://hatena.blog 2025-08-23 14:50:42 rich https://bwgift.hatenadiary.jp/entry/2025/08/23/145042 1.0 100%