nhn-techorus https://blog.hatena.ne.jp/nhn-techorus/ Chorus Journal | NHN テコラスがお届けする技術メディア https://journal.nhn-techorus.com/ AWS 著者：nemod はじめに この記事はNHN テコラス Advent Calendar 2024の22日目の記事です。 私が所属するチームではGlue Crawlerを使うことが多く、その中でも加速クロールと呼ばれる機能を使ってデータを管理することが多いです。しかし加速クロールは全体クロールや増分クロールよりも設定が複雑で、理解が難しい部分があります。 そのため今回は加速クロールの説明とCloudFormationの構成のサンプルを共有したいと思います。 クローラーの種類 まずGlue Crawlerについて簡単に説明します。大きく分けて3種類の読み取り方法があります ・全体クロール ・増分クロール ・加速クロ… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fjournal.nhn-techorus.com%2Fentry%2Farchives%2F37819" title="Glue Data Catalogにテーブルを登録したデータを対象に加速クロールを使う - Chorus Journal | NHN テコラスがお届けする技術メディア" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/n/nhn-techorus/20260930/20260930173901.jpg Hatena Blog https://hatena.blog 2024-12-22 00:00:07 rich https://journal.nhn-techorus.com/entry/archives/37819 1.0 100%