shot4410 https://blog.hatena.ne.jp/shot4410/ SB Intuitions TECH BLOG https://www.sbintuitions.co.jp/blog/ 概要 Pretrainingチームの高瀬翔と李凌寒です。 弊チームでは日本語能力に主眼を置いた大規模言語モデルの構築に取り組んでおり、Sarashina2-70BやSarashina2.1-1Bのように、いくつか事前学習モデルも公開してきました。 これまで公開したモデルは日本の知識を問う質問応答タスクでは高い性能を達成している一方で、数学タスクやコーディングタスク、すなわち、文章題のような自然言語で提示された計算問題や、与えられた指示を満たすコードを生成するタスクの性能は芳しくありませんでした。 これは、CommonCrawlのようなウェブ文書の中に、数学・コーディングタスクの性能向上に寄与す… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fwww.sbintuitions.co.jp%2Fblog%2Fentry%2F2025%2F03%2F06%2F112144" title="Sarashina2.2：数学・コーディングタスクの性能を向上させた日本語言語モデル - SB Intuitions TECH BLOG" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/s/shot4410/20250303/20250303121134.png Hatena Blog https://hatena.blog 2025-03-06 11:21:44 rich https://www.sbintuitions.co.jp/blog/entry/2025/03/06/112144 1.0 100%