tanioris https://blog.hatena.ne.jp/tanioris/ SEN PRODUCT BLOG https://productblog.sencorp.co.jp/ はじめに 千では今まで何度かデータ基盤の構築に取り組んできたのですが、データエンジニアやアナリストの不在によりデータ利活用が十分にできていない状態でした。そこから2024年にデータエンジニアを採用し本格的なデータ基盤の構築に取り組んでいます。今回は現在構築中のデータ基盤について紹介させていただき、今後やっていきたいことをお話させていただきます。 データ基盤の全体構成 概略図はこちらになります。 各種データの取得とS3への書き出し 各プロダクトのデータベースやCRMからS3へのファイル書き出しにはAWS Glueを使用しています。 データベースからSnowflakeへのデータ取り込みについてはS… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fproductblog.sencorp.co.jp%2Fentry%2F2025%2F11%2F18%2F113406" title="千のデータ基盤の紹介 - SEN PRODUCT BLOG" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn-ak.f.st-hatena.com/images/fotolife/t/tanioris/20251117/20251117155927.png Hatena Blog https://hatena.blog 2025-11-18 11:34:06 rich https://productblog.sencorp.co.jp/entry/2025/11/18/113406 1.0 100%