livesense-analytics https://blog.hatena.ne.jp/livesense-analytics/ LIVESENSE Data Analytics Blog https://analytics.livesense.co.jp/ Amazon Redshift 分析基盤 データエンジニアリングチームのよしたけです。 弊社各サービスのデータ分析基盤であるLivesense Analyticsの開発、運用を行っています。 Livesense Analyticsのアーキテクチャ Livesense AnalyticsはAWS上でシステムが構築されています。S3上にあるデータやtd-agent、Kinesis Firehoseなどを経由して集めたデータをAmazon Redshiftに格納し、データウェアハウスとして運用しています。詳細は、弊社大政がデータ分析基盤Night #1 で発表した内容をご参照ください。 当時とは一部変更になっている部分もありますが、大枠は上… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fanalytics.livesense.co.jp%2Fentry%2F2017%2F12%2F15%2F090000" title="Amazon Redshiftのデータ量監視とエンコードタイプ - LIVESENSE Data Analytics Blog" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://speakerd.s3.amazonaws.com/presentations/c51a36e2acdc442ba4cf28d9df76b45b/slide_5.jpg Hatena Blog https://hatena.blog 2017-12-15 09:00:00 rich https://analytics.livesense.co.jp/entry/2017/12/15/090000 1.0 100%