bwgift https://blog.hatena.ne.jp/bwgift/ 地平線まで行ってくる。 https://bwgift.hatenadiary.jp/ LLM Colaboratory Python 自然言語処理 Simple test-time scalingという方法を使ってファインチューニングされたQwen2.5ベースのモデルをためしてみます。Simple test-time scalingとはWaitトリックが印象的なファインチューニング手法です。この学習には厳選された教師データを用いているというとのこと。LLM目的に応じた「正しい」教師データを深く学習させることが重要であることも示唆されます。テスト環境はColabのL4環境でVRAM占有率は21589MiB / 23034MiBでした。GGUFモデルはbartowskiさん作成のものを利用しました。 いつもの生成をさせてみましたが、知識を問う… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fbwgift.hatenadiary.jp%2Fentry%2F2025%2F02%2F09%2F123453" title="Simple test-time scaling: bartowski/simplescaling_s1-32B-GGUFをcolabとollamaとで、ためしてみる。 - 地平線まで行ってくる。" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2025-02-09 12:34:53 rich https://bwgift.hatenadiary.jp/entry/2025/02/09/123453 1.0 100%