bwgift https://blog.hatena.ne.jp/bwgift/ 地平線まで行ってくる。 https://bwgift.hatenadiary.jp/ LLM Colaboratory Python 自然言語処理 mmngaさんによるcyberagent-Mistral-Nemo-Japanese-Instruct-2408のgguf変換版を試してみます。日本語を意識しているLLMです。昨年発表のモデルですが、変換モデルが公開されたので改めて試します。ColabのL4環境で実行しました。VRAM占有率は、8993MiB / 23034MiB でした。Apache License 2ライセンス。 動作も軽いし日本語も得意分野です。要約や計算もできてました。コンテキスト長もありますし、（ライセンス問題なければ）RAGやデータセット作成を試してみたいモデルでした。 cyberagentさんが公開しているcyb… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fbwgift.hatenadiary.jp%2Fentry%2F2025%2F01%2F26%2F105551" title="mmnga/cyberagent-Mistral-Nemo-Japanese-Instruct-2408-ggufをollamaとcolabで試す。 - 地平線まで行ってくる。" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2025-01-26 10:55:51 rich https://bwgift.hatenadiary.jp/entry/2025/01/26/105551 1.0 100%