Tips
Pythonのforループのネストが深いなら使いたいitertoolsの組みあわせイテレータ
Pythonの標準ライブラリ「itertools」を使用すると、forループの深いネストを防止することができます。今回はitertoolsの中でも特によくあるユースケースを紹介します。itertoolsには、その他にも車輪の再発明を防ぐような形でイテレータに関しての処理を行う関数が用意されていますので、そちらも紹介しています。
伴拓也
Tips
47件の記事
Tips
BigQueryの全カラム選択はEXCEPTとREPLACEを使いこなしたい
SELECT文で基本的には全カラムを選択したいものの、特定のカラムは除きたいとき、通常のDBにおいては全カラム名を頑張って指定するしかないかと思いますが、BigQueryのSELECT文には EXCEPT という構文があり、これを利用することで簡単に特定の列を除外した上でSELECTを行うことが可能になります。本記事ではあわせて置き換えに使うREPLACEも紹介しています。
伴拓也
Tips
QUALIFY句の使い方を知りWITH句を削る
今回はBigQueryやSnowflakeで使えるQUALIFY句の使い方についてまとめます。QUALIFY句は正しく使うことでWITH句を削ることが出来ることもあるなど、対応するDBを使用している場合はぜひ知っておきたい内容かと思います！
伴拓也
Tips
遅ればせながら Terraform 運用のベストプラクティスについて考える
インフラ管理の効率UPを目指し Terraform を導入したので、これまでの運用を振り返ってみました。環境差異の最小としつつ再利用可能なモジュールを設計することで汎用性の高い作りとしています。
山野悠
Tips
ARMなWindowsで開発したい人に捧ぐ！現状のARM機で動かないモノと動くモノ
2024年の夏の主役は生成AI？いやいや、ARMなWindowsでしょう。今回はSnapdragon X Elite搭載機で開発環境を構築した際にどのようなソフトウェアが動いてどのようなソフトウェアが動かないのか、そして実際に開発機として使えるのかどうかの感触を記事にまとめていきます。
伴拓也
Tips
LookMLで意図しないviewのオーバーライドを防ぐ方法
LookMLのRefinements機能を活用することで、既存のviewやExploreを編集せずに内容をオーバーライドできます。さらに、finalパラメータを利用して、予期せぬオーバーライドを防ぐことができます。
中村卓矢
Tips
ARMなWindowsのWSLでamd64なDockerイメージをQEMUで強引に動かす方法
SurfaceなどSnapdragon採用のWindowsが先月から続々と発売されていますが、ARMを採用している場合に問題になるのはやはりDocker周りです。普通にWSLで動かそうとすると amd64 用のコンテナイメージは動かないので、そのようなイメージをQEMUを使い強引に動かす方法についてまとめます。
伴拓也
Tips
AirflowでGCSのオブジェクト検知にワイルドカードを利用する
AirflowでGCS内の名前に規則性がないオブジェクトを検知する方法を紹介します。具体的には、GCSObjectExistenceSensorでuse_globパラメータを指定することで、特定のパターンを持つオブジェクトを検知できます。
中村卓矢
Tips
Pythonで非同期処理をするときのasyncioの使い方
今回はPythonで非同期処理を行える標準ライブラリである「asyncio」の使い方についてまとめてみます。Pythonで同時に複数の処理を行う場合は非同期処理もしくは並列処理を行うことになると思いますが、asyncioは最も手軽で、I/Oバウンドな処理を行うのに最適です。
伴拓也
Tips
Google Analytics 4(GA4)のレコード数が増えている!?
Google Analytics 4(GA4)のエクスポート機能を使い、BigQueryにデータをエクスポートする際の注意点について解説しています。「レイトヒット」と呼ばれる仕様があり、本来のイベント発生タイミングより遅れてデータが到着するため、注意が必要です。
中村卓矢
Tips
ローカル開発時のGoogle Cloud認証情報はgcloud authコマンドでsetすると早い
今回はGoogle Cloudのローカル開発時の必須コマンドといっても過言では無い gcloud auth application-default loginコマンドについて紹介しています。サービスアカウントを新規に発行し、鍵ファイルを作成する方法に比べて漏洩リスクも抑えられるので、ぜひ抑えておきたいコマンドの一つだと思います。
伴拓也
Tips
ローカルでは動いたgitコマンドがGitHub Actionsでは動かない？
今回はGitHub Actionsの話です。GitHub Actions内でgitコマンドを実行するときがあると思うのですが、ローカルで動いていたgitコマンドがGitHub Actionsでは動かないケースがあったので、原因とどういった対応をとれば良いかも含めて解説します。
伴拓也