shigemk2 https://blog.hatena.ne.jp/shigemk2/ by shigemk2 https://www.shigemk2.com/ presto システム構成 コンポーネントの役割 prestoリソースの活用 まとめ バッチ環境 hadoop ほかシステム Hadoopに対するETLはやってない(digdag/scoopとかは使っている) 定型的なクエリがメイン presto 分析用クラスタ 0.170 1 coord, 20 worker 5分おきにクエリチェックをするクエリを流している query logをfluentd経由でKibanaで見れるようにしている redash 1.0.1+b2845 google oauth連携 amache zeppelin アナリスト用notebook https://zeppelin.apach… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fwww.shigemk2.com%2Fentry%2Fdmm_presto_prestodb" title="memo DMMでのprestoおよび周辺エコシステムの運用事例 #prestodb - by shigemk2" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2017-06-15 21:41:56 rich https://www.shigemk2.com/entry/dmm_presto_prestodb 1.0 100%