acro-sasaki https://blog.hatena.ne.jp/acro-sasaki/ Taste of Tech Topics https://acro-engineer.hatenablog.com/ NLP 情報検索 こんにちは。社内データサイエンスチームYAMALEXの@Ssk1029Takashiです。 最近はRTX4090のマシンを買って電気代が上がってきています。昨今NLP界隈では事前学習モデルが出てからは、検索というのもキーワードでの検索だけではなく、文章を入力にして似たような文章を探す類似文書検索も使われるようになりました。 そんな中で、今回はFAQを対象にした類似文書検索をSentence BERTを使って試してみます。 FAQでよくある困りごと 今回やること Sentence BERTとは 検証 FAQデータセットから文章ベクトルを学習する 回答文から文章ベクトルを生成する 質問文から近しい… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Facro-engineer.hatenablog.com%2Fentry%2F2023%2F01%2F16%2F120000" title="Sentence BERTをFine TuningしてFAQを類似文書検索してみる - Taste of Tech Topics" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/a/acro-sasaki/20230108/20230108015305.png Hatena Blog https://hatena.blog 2023-01-16 12:00:00 rich https://acro-engineer.hatenablog.com/entry/2023/01/16/120000 1.0 100%