データ関連
Cloud Composer の運用には Secret Manager を組み合わせるのがオススメ
Cloud ComposerはAirflowのマネージドサービスですが、ただのマネージドサービスではなく、Google Cloud内のサービスと組み合わせることでより便利に使えます。今回はその中でもSecret Managerと組み合わせた運用について解説します。
伴拓也
全記事一覧
220件の記事
データ関連
Cloud Composer(Airflow)のon_failure_callbackの位置には注意が必要
Cloud Composer(Airflow)のようなワークフロー管理ツールにおいては基本的にエラーが発生したときにはメール通知やSlack通知などのためのコールバックの仕組みが用意されているものですが、Cloud Composerの場合はその書く位置によって機能がかわることに注意が必要です。本記事ではその内容について解説します
伴拓也
広報
東京大学メタバースラウンジで登壇した話
先日行われた東京大学メタバースラウンジにて発表したレポートです！なぜABCがメタバース空間制作ができたのか、どんな空間を制作したのかを紹介しています。
野﨑光
Tips
遅ればせながら Terraform 運用のベストプラクティスについて考える
インフラ管理の効率UPを目指し Terraform を導入したので、これまでの運用を振り返ってみました。環境差異の最小としつつ再利用可能なモジュールを設計することで汎用性の高い作りとしています。
山野悠
Tips
ARMなWindowsで開発したい人に捧ぐ！現状のARM機で動かないモノと動くモノ
2024年の夏の主役は生成AI？いやいや、ARMなWindowsでしょう。今回はSnapdragon X Elite搭載機で開発環境を構築した際にどのようなソフトウェアが動いてどのようなソフトウェアが動かないのか、そして実際に開発機として使えるのかどうかの感触を記事にまとめていきます。
伴拓也
Tips
LookMLで意図しないviewのオーバーライドを防ぐ方法
LookMLのRefinements機能を活用することで、既存のviewやExploreを編集せずに内容をオーバーライドできます。さらに、finalパラメータを利用して、予期せぬオーバーライドを防ぐことができます。
中村卓矢
セキュリティ
Snowflake アカウント管理のベストプラクティスが更新されたので設定する
新たに Snowflake アカウント全体に MFA 設定を強制できるようになりました。これに合わせて Snowflake から公開されているベストプラクティスを参考にポリシーを見直しました。
山野悠
Tips
ARMなWindowsのWSLでamd64なDockerイメージをQEMUで強引に動かす方法
SurfaceなどSnapdragon採用のWindowsが先月から続々と発売されていますが、ARMを採用している場合に問題になるのはやはりDocker周りです。普通にWSLで動かそうとすると amd64 用のコンテナイメージは動かないので、そのようなイメージをQEMUを使い強引に動かす方法についてまとめます。
伴拓也
データ関連
Google Analytics 4(GA4)のmanual_系パラメータはUTMパラメータだけじゃない
Google Analytics 4のデータには「manual_source」というものがありますが、
伴拓也
研究開発
Audio2Faceで書き出したフェイシャルアニメーションをMetaHumanに適用する方法
Omniverse Audio2Faceを用いて作成したフェイシャルアニメーションを書き出す方法、そしてそのアニメーションをUnreal EngineにてMetaHumanに適用する方法を紹介します。
山下真里奈
データ関連
AWS Glue のローカル開発環境から BigQuery に接続する
ETL 処理に便利な AWS Glue のローカル開発環境構築方法についてまとめました。特に、BigQuery との接続について具体的な方法を記載しています。
山野悠
データ関連
Airflow REST APIでCloud ComposerのDAGを実行する
Airflow(Cloud Composer)ではDAGをスケジュール設定なしで作成することもできますが、その場合はなんらかの手段で実行することが必要になります。GUIから実行するのも一つの手ですが、今回はCLIベースで手軽に実行できるREST APIの呼び出しによる実行方法についてまとめます。
伴拓也