yskwknt https://blog.hatena.ne.jp/yskwknt/ CADDi Tech Blog https://caddi.tech/ AI / ML 製造業ドメイン 本記事は CADDi Tech/Product Advent Calendar 2025 22日目の記事です。 こんにちは、Data & Analysis部で機械学習エンジニアをしている由川です。 私は、製造業特化LLMを開発するための評価ベンチマークづくりに取り組んでいます。本記事では、この取り組みにおいて得られた知見や苦労していることを紹介したいと思います。 ドメイン特化LLMに関する評価ベンチマークを作ろうとしている方の参考になれば幸いです。 なぜ製造業特化の評価ベンチマークを作るのか ベンチマークタスクの定義 ベンチマークタスクのデータセット作成 評価対象となる図面の選定 評価対象の図… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fcaddi.tech%2F2025%2F12%2F22%2F090000" title="製造業特化LLMを開発するための評価ベンチマーク - CADDi Tech Blog" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/c/caddi-tech/20251222/20251222090007.png Hatena Blog https://hatena.blog 2025-12-22 09:00:00 rich https://caddi.tech/2025/12/22/090000 1.0 100%