bwgift https://blog.hatena.ne.jp/bwgift/ 地平線まで行ってくる。 https://bwgift.hatenadiary.jp/ LLM Colaboratory Python 自然言語処理 Sky-TはQwQ-32B-Previewを使って作成したデータをベースにして450ドル未満という低コストで作成した推論モデルです。Llama-Factory によって学習させたとのこと。特にコーディング性能もよいということです。ColabのT4環境で実行します。VRAM占有率は21711MiB / 23034MiB でした。 結果、Qwen2.5など高性能な32Bとも遜色ない回答が得られました。指示も比較的素直に反応する感触です。QwQを使ってデータセットを作成したとのことですが、生成された日本語は自然な感じが強いです。ノイズの多いWikipediaのスクレイピングデータから重要な情報をしっ… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fbwgift.hatenadiary.jp%2Fentry%2F2025%2F01%2F14%2F221916" title="sky-t1-32B-preview-clineをollamaとColabでためす。 - 地平線まで行ってくる。" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2025-01-14 22:19:16 rich https://bwgift.hatenadiary.jp/entry/2025/01/14/221916 1.0 100%