めもめも

データエンジニアリング、機械学習について書いてます

BigQuery

BigQueryのパーティションテーブルとシャーディングテーブルどちらが良いか

概要 BigQueryで日付ごとのテーブルを作成するときの選択肢として、パーティションテーブルとシャーディングテーブルの2つがあり、どう使い分けるべきか疑問に思いました。

Cloud SQL と BigQueryを連携する

はじめに マスタデータを連携したい場合などのために、Cloud SQLで管理しているデータをBigQueryに連携する方法を紹介します。

BigQueryの複数テーブルを同時に削除するワンライナー

以下のコマンドを、Cloud SDKがインストール済みの環境で実行すると、特定の文字列を含むテーブルを同時に削除することが可能です。