データ関連
BigQueryのパーティショニングとシャーディングを改めて整理する
BigQueryユーザーでもたまに誤解されていることが多いパーティショニングとシャーディングのそれぞれの違いについて改めて念のため調べ直したのでその記録をまとめておきます。
伴拓也
データ基盤・分析・可視化に関する取り組み
BigQueryユーザーでもたまに誤解されていることが多いパーティショニングとシャーディングのそれぞれの違いについて改めて念のため調べ直したのでその記録をまとめておきます。
本記事では2022年のLookerに関する登壇の内容についてまとめています。朝日放送グループホールディングスでは認知拡大、人脈形成のために登壇機会を活用し、積極的に発表を行っています。
Google CloudにおけるGUIベースのデータ統合パイプラインツールであるCloud Data FusionにおいてSlackエラー通知を実現している方法についてメモがてらまとめていきます。どのようなパイプラインでもエラー検知は必須かと思います。
Google Cloudにて提供されているデータ変換パイプライン用サービスDataformを用いてデータ基盤にガバナンスを効かせていくことを目指して技術検証を進めた結果について、まずはその概要からまとめています。