yuu_kimy https://blog.hatena.ne.jp/yuu_kimy/ DATAFLUCT Tech Blog https://tech.datafluct.com/ データ基盤 Airbyte ELT こんにちは。今回は、データ基盤の構築の一部を実際に体験してみたいと思います。 データ基盤を作成するにあたり、まずは、社内に眠る様々なデータを集めてくる必要があります。前回の記事では、その機能を「収集」と紹介していました。 データ基盤とは何か？ 収集・変換・統制の3つの構成要素に分けて解説 本記事では、データ基盤の収集機能をOSSで構築し、実際に体験してみたいと思います。 これからデータ基盤を開発していく方に、少しでもお役に立てたら幸いです。 データ連携に必要なELTについて データ抽出機能に特化したAirbyteについて ELに必要な環境のセットアップ Airbyteのセットアップ Postg… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Ftech.datafluct.com%2Fentry%2F20220827%2F1661597213" title="データ抽出に特化したAirbyteによるEL(T) 環境構築の実践 - DATAFLUCT Tech Blog" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/d/datafluct/20220929/20220929023957.png Hatena Blog https://hatena.blog 2022-08-27 19:46:53 rich https://tech.datafluct.com/entry/20220827/1661597213 1.0 100%