kopo3 https://blog.hatena.ne.jp/kopo3/ ふさふさ日記 https://bio-linux-etc.hatenablog.com/ 結局2080Tiの処理が一番早く完了した。max_seq_lengthを512から128に減らした影響がどのくらいあるか分からないが、あまりなければ今後もこのPCを主体で使うことになりそう。4-5日で完了するのであればそれなりに実験の回数を重ねることができそうだ。 そして現在は生成されたチェックポイントデータをPyTorch用のデータに変換するところで躓いている。なんかもっと使いやすいようなデータを生成して欲しい･･･。 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fbio-linux-etc.hatenablog.com%2Fentry%2F2022%2F02%2F08%2F163337" title="日本語事前学習は終了したものの - ふさふさ日記" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2022-02-08 16:33:37 rich https://bio-linux-etc.hatenablog.com/entry/2022/02/08/163337 1.0 100%