newmo https://blog.hatena.ne.jp/newmo/ newmo 技術ブログ https://tech.newmo.me/ (この記事は心のこもった手書きでお届けしております) @kuといいます。 10月に放送された「ガイアの夜明け」で紹介された、タクシーに乗りたいお客さまからの電話を受けて指定場所に迎車するLLMプロダクトmaido(Mobility AI Dispatch Operator)の開発に携わっています。 この記事ではmaidoで行っているLangfuseとDSPyを使ってプロンプトを定量的に改善していく仕組みをご紹介します。 Langfuseとは Langfuseは、LLMアプリケーションのobservabilityを確保するツールです。電話ごとのセッションや、トレース単位でLLM呼び出しの入出力、… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Ftech.newmo.me%2Fentry%2Fmaido-langfuse-dspy" title="LangfuseとDSPyを使った定量的なプロンプト評価と改善の仕組み - newmo 技術ブログ" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/n/newmo/20251203/20251203154336.png Hatena Blog https://hatena.blog 2025-12-06 09:00:00 rich https://tech.newmo.me/entry/maido-langfuse-dspy 1.0 100%