Ryobot https://blog.hatena.ne.jp/Ryobot/ ディープラーニングブログ https://deeplearning.hatenablog.com/ Deep Learning Natural Language Processing この1週間はGPT-3のユースケースの広さに驚かされる毎日でした． シリコンバレーでは話題騒然ですが日本ではほとんど話題になっていないので，勢いで書くことにしました． GPT-3はOpenAIが開発した言語生成モデルです．名前の由来であるGenerative Pretrained Transformerの通り，自然言語処理で広く使われるTransformerモデルを言語生成タスクで事前学習しています． 先月申請すれば誰でもGPT-3を利用できるOpenAI APIが発表され，様々な業種の開発者によって驚くべきデモンストレーションがいくつも公開されています． 特に話し言葉からJSXやReactのコードを生成するデモは著名なベンチャーキャピタルから注目を集め，誇大広告気味だと警鐘を鳴らす事態に発展しています． 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fdeeplearning.hatenablog.com%2Fentry%2Fgpt3" title="GPT-3の衝撃 - ディープラーニングブログ" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/R/Ryobot/20200720/20200720105817.png Hatena Blog https://hatena.blog 2020-07-21 09:40:08 rich https://deeplearning.hatenablog.com/entry/gpt3 1.0 100%