データ関連
dbt project on Snowflake 運用に向けて開発環境を整える
Snowflake上でのdbtプロジェクトの運用に向けた開発環境の整備に関する具体的な手順や設定方法について記載します。ローカル環境の構築、dbtプロジェクトの操作方法、CI/CDパイプラインの設定、これらに関する注意点にも触れます。
山野悠
4件の記事
Snowflake上でのdbtプロジェクトの運用に向けた開発環境の整備に関する具体的な手順や設定方法について記載します。ローカル環境の構築、dbtプロジェクトの操作方法、CI/CDパイプラインの設定、これらに関する注意点にも触れます。
チーム開発を行う際はどんな言語であれコードに統一性を持たせるためにLinter/Formatterを導入するかと思います。最近Pythonでそれらの機能をまとめて・高速に行えるRuffが注目を浴びているということで、実際にFlake8+Blackの環境から移行のテストを行いました。本記事ではその手順をまとめています。
今回はGitHub Actionsの話です。GitHub Actions内でgitコマンドを実行するときがあると思うのですが、ローカルで動いていたgitコマンドがGitHub Actionsでは動かないケースがあったので、原因とどういった対応をとれば良いかも含めて解説します。
先日トレジャーデータ様のオンラインセミナーにて登壇してお話しさせていただいた内容の中から、GitOpsでの開発・運用についての部分を抜き出し、メリットや実践にあたっての注意点などを補足込みで纏め直してみました。