bwgift https://blog.hatena.ne.jp/bwgift/ 地平線まで行ってくる。 https://bwgift.hatenadiary.jp/ LLM BERT Colaboratory 自然言語処理 コード検索やコード理解を目的とした事前学習済みモデルをXで見かけたので試してみました。こういう特化型モデルは興味深いです。いろいろと作って使えるときっと楽しいでしょう。モデル有難く動かしてみました。 企業の文章だと似たような文章ばかりのものがあります。うまくデータセットを整えることが出来たら、微妙な文章でも差異を求められるモデルができるのでしょうか。 試してみたので、メモとして残します。 https://t.co/2MxkmQdxbo をアップロードしましたSentenceTransformersでファインチューニングしています。普段の方法で計算すると平均MRRが0.97を超えてしまった（難し… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fbwgift.hatenadiary.jp%2Fentry%2F2025%2F03%2F25%2F233906" title="codeembed-modernbert-owl-previewをcolabで試してみる。 - 地平線まで行ってくる。" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2025-03-25 23:39:06 rich https://bwgift.hatenadiary.jp/entry/2025/03/25/233906 1.0 100%