quoll00 https://blog.hatena.ne.jp/quoll00/ Carpe Diem https://christina04.hatenablog.com/ BigQuery Bigtable 概要 Bigtableは数十億行、数千列規模に拡張可能な分散型NoSQLですが、 特定のカラムファミリのみ持つ行を全て抽出する といった時にcbt(CLIツール)やSDKではiterateしてデータをハンドリングするため、大規模データ分析の用途では使いづらさがあります。 そこでBigQueryの外部テーブルとして扱うことで、SQLを用いて簡単に条件に基づいたデータのみ抽出することが可能になります。 外部テーブルの作成 環境 以下の環境であると仮定して進めます。 項目 設定値 GCPプロジェクト project-a Bigtableインスタンス bigquery-access-test Bigt… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fchristina04.hatenablog.com%2Fentry%2Faccess-bigtable-as-bigquery-external-table" title="BigQueryからBigtableへアクセスしてデータ分析 - Carpe Diem" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2023-05-14 09:06:43 rich https://christina04.hatenablog.com/entry/access-bigtable-as-bigquery-external-table 1.0 100%