fkzwsoftwaredev https://blog.hatena.ne.jp/fkzwsoftwaredev/ ENECHANGE Developer Blog https://tech.enechange.co.jp/ はじめに データレイクのテーブルフォーマット Apache Iceberg というものがあると知りました。 Icebergは、大規模な分析テーブル向けの高性能フォーマットです。IcebergはSQLテーブルの信頼性と簡便性をビッグデータにもたらすと同時に、Spark、Trino、Flink、Presto、Hive、Impalaといったエンジンが、同じテーブルを同時に安全に操作できるようにします。 弊社プロダクトの中には大量の電力使用量データを扱うものもありParquetファイルを利用しているのですが、電力需要家ごとにParquetファイルを分割し、編集時にはPythonでParquet ファイ… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Ftech.enechange.co.jp%2Fentry%2F2025%2F12%2F17%2F131155" title="AWS Glue + Iceberg で分析基盤を構築し、電力データを取り込んでみる - ENECHANGE Developer Blog" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2025-12-17 13:11:55 rich https://tech.enechange.co.jp/entry/2025/12/17/131155 1.0 100%