Google Cloudの代表的なサービスの一つにBigQueryがあります。高性能なデータウェアハウスサービスで 、PB(ペタバイト)級のデータを扱うことができます。とはいえ、大規模なデータを扱うことには課題も伴います。 その一つはシステムの新規開発や追加開発、データ移行などにおけるデータの検証です。 小規模なデータでは、カラム1個1個を検証していくこともできますが、大規模なデータではこれが時間 …
Google Cloudの代表的なサービスの一つにBigQueryがあります。高性能なデータウェアハウスサービスで 、PB(ペタバイト)級のデータを扱うことができます。とはいえ、大規模なデータを扱うことには課題も伴います。 その一つはシステムの新規開発や追加開発、データ移行などにおけるデータの検証です。 小規模なデータでは、カラム1個1個を検証していくこともできますが、大規模なデータではこれが時間 …