swx-tatsuya-yamamoto https://blog.hatena.ne.jp/swx-tatsuya-yamamoto/ サーバーワークスエンジニアブログ https://blog.serverworks.co.jp/ Amazon S3 Amazon Redshift データ分析 データソース データ活用 はじめに こんにちは、山本です。 今回はAWS資格の一つであるDEA(Data Engineering Associate)の学習中に気になった「列指向形式」データの概要やメリット・デメリットについてお話しします。 私と同じようにAWSの資格を勉強している方にとっての手助けになれば幸いです。 データ分析における落とし穴 データ分析用にデータレイクを構築する際、まず手軽な形式としてデータをCSV形式で保存することは一般的で広く行われていると思います。 しかし、CSV形式は「行指向」のフォーマットなので以下のような問題を引き起こすことがあります。 非効率なデータ読み込み 必要な列がごく一部であって… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fblog.serverworks.co.jp%2F2025%2F08%2F29%2F181638" title="データ分析における列指向形式(Parquet)を理解する - サーバーワークスエンジニアブログ" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> https://cdn.user.blog.st-hatena.com/default_entry_og_image/155844699/1589415473304665 Hatena Blog https://hatena.blog 2025-08-29 18:16:38 rich https://blog.serverworks.co.jp/2025/08/29/181638 1.0 100%