nmoriyama https://blog.hatena.ne.jp/nmoriyama/ moriyamaのエンジニアリング備忘録 https://nmoriyama.hatenablog.com/ 自然言語処理に限らず、機械学習関連のプロジェクトではスタート時は、なるべく複雑なコーディングをせずにシンプルなベースラインモデルを低コストで作成し、そこからデータの傾向やタスクの複雑さを把握することが重要です。 ところが自然言語処理では前処理のコストが高く、最低限でも単語分割、ベクトル化、深層学習を用いる場合は事前学習された埋め込みベクトルを準備する必要があります。その後は他のタスクと同様にモデルの保存方法や、予測のパイプラインで悩みポイントを抱えることが多いと思います。 最近はAutoMLを始めとした機械学習の自動化が進歩し、初手から高性能なモデルをブラウザ上で数クリックで作成できますが、中… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fnmoriyama.hatenablog.com%2Fentry%2F2020%2F07%2F10%2F160031" title="flairを使って最速でNLPのベースラインモデルを作る - moriyamaのエンジニアリング備忘録" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/n/nmoriyama/20200710/20200710133947.png Hatena Blog https://hatena.blog 2020-07-10 16:00:31 rich https://nmoriyama.hatenablog.com/entry/2020/07/10/160031 1.0 100%