Tips
認証にAWS IAMロールを使いながらAWS S3とGCSをリアルタイム同期する
マルチクラウドの必要性が取り上げられるようになった昨今ではストレージサービス間の連携が必要になるシーンもあるかと思います。今回はS3からGoogle Cloud StorageへStorage Transfer Serviceを利用してリアルタイム同期する方法をまとめました。また、認証にはAWS IAMロールを使うことでキー管理を不要としています。
伴拓也
#Google Cloud
48件の記事
レポート
Google Cloud Next Tokyo ’23 で感じたトレンド
Google Cloud Next Tokyo ’23の参加レポートです。会場の雰囲気や展示されていた内容について紹介すると同時に、今回のNextで感じた生成AI、データ分析、開発/運用、セキュリティといった各種内容から、「今後必要とされる内容」を考えています。
伴拓也
データ関連
Google Analytics 4のBigQuery連携時のデータ差分について
Webサイトの分析において、Google Analytics 4(GA4)とBigQuery連携データの値にはズレが生じることがあります。GA4では、ユーザーを識別するために複数の識別子を使用していますが、BigQueryに連携されるのは一部の識別子のみです。また、セッション数は推定値で算出されるため、正確な値を得るには別途計算が必要です。この記事では、GA4とBigQuery連携データの差分の原因について解説しています。
伴拓也
Tips
Google Cloudで使えるCLIコマンドリスト Cloud Storage編
Google CloudはCLIとの相性が非常に良いのでそのコマンドについてまとめていくシリーズ記事です。今回はCloud Storageを対象にしています。Cloud Storageに対して推奨されるgcloud storageコマンドの中で特に使うものを絞ってまとめてみました。少しずつでもCLI操作を覚える手助けとなれば幸いです。
伴拓也
アプリ
Slack Boltを使ってPythonで作ったアプリをCloud Runで動かすためのポイント
Slack BoltはSlackにおけるBOT(アプリ)を開発する際にとても便利なフレームワークです。Slack Boltを活用したアプリは基本的に常時稼働しているインスタンス等で稼働させることのほうが多いですが、本記事では、Slack Boltを使って作ったPythonスクリプトをCloud Runで稼働させるまでの方法についてまとめています。
伴拓也
データ関連
Cloud ComposerでSecret変数を使う
本記事では、フルマネージドでワークフローを管理出来る、Cloud ComposerでSecret変数を使う方法について説明しています。Google Cloudで提供されているSecret Managerを使うことで秘匿すべき情報をSecret変数としてスムーズに受け渡すことができます。
伴拓也
研究開発
PaLM 2をLangChainで使う
LangChainを使うと多様なLLMモデルを簡単に切り替えて使用できます。今回は最近GA(一般公開)になったGoogle Cloudで提供されているLLMであるPaLM2をLangChainで使用する方法についてまとめています。
伴拓也
レポート
Google Cloud 認定資格 Professional Data Engineer 取得までの流れ
各種クラウドベンダで提供されている認定資格のうち、Google CloudによるProfessional Data Engineerについて受験・合格してきたので、その概要・受験の流れ、勉強方法や所感についてまとめていきます
伴拓也
データ関連
BigQueryのパーティショニングとシャーディングを改めて整理する
BigQueryユーザーでもたまに誤解されていることが多いパーティショニングとシャーディングのそれぞれの違いについて改めて念のため調べ直したのでその記録をまとめておきます。
伴拓也
広報
2022年のLooker関連登壇記録
本記事では2022年のLookerに関する登壇の内容についてまとめています。朝日放送グループホールディングスでは認知拡大、人脈形成のために登壇機会を活用し、積極的に発表を行っています。
伴拓也
データ関連
Data FusionでのパイプラインのSlackエラー通知設定方法
Google CloudにおけるGUIベースのデータ統合パイプラインツールであるCloud Data FusionにおいてSlackエラー通知を実現している方法についてメモがてらまとめていきます。どのようなパイプラインでもエラー検知は必須かと思います。
伴拓也
データ関連
データ基盤にガバナンスを効かせるためのDataform概要調査
Google Cloudにて提供されているデータ変換パイプライン用サービスDataformを用いてデータ基盤にガバナンスを効かせていくことを目指して技術検証を進めた結果について、まずはその概要からまとめています。
伴拓也