mita2db https://blog.hatena.ne.jp/mita2db/ mita2 database life https://mita2db.hateblo.jp/ MySQL のデータを BigQuery にサクっとインポートしたメモ。 Big Query がサポートしている形式 Arvo ORC CSV Parquet JSON Arvo/ORC/Parquet は MySQL からそれぞれのデータ形式に簡単に変換する方法が見つからなかった。 CSVはカンマや改行などの特殊記号がうまく扱えるか不安があったので、JSONを選択。 MySQL Shell で JSON 形式で export する MySQL Shell を使うと、非常に簡単に、結果を JSON形式 で取り出すことが出来て便利でした。 --result-format=ndjson を指定して… 190 <iframe src="https://hatenablog-parts.com/embed?url=https%3A%2F%2Fmita2db.hateblo.jp%2Fentry%2F2023%2F09%2F02%2F151651" title="MySQL のデータを BigQuery にサクっとインポートした - mita2 database life" class="embed-card embed-blogcard" scrolling="no" frameborder="0" style="display: block; width: 100%; height: 190px; max-width: 500px; margin: 10px 0px;"></iframe> Hatena Blog https://hatena.blog 2023-09-02 15:16:51 rich https://mita2db.hateblo.jp/entry/2023/09/02/151651 1.0 100%