Ritolabo

カテゴリDataform

Dataform の operations で DTS 転送先テーブルに description を設定する

  • Dataform
Dataform の operations で DTS 転送先テーブルに description を設定する

DTS の WRITE_TRUNCATE で消える BigQuery テーブル/カラムの description を、Dataform の operations(ALTER TABLE)で毎回再設定する。

Dataform の開発ワークスペースで SQLX を使った開発を行う

  • Dataform
Dataform の開発ワークスペースで SQLX を使った開発を行う

Dataform の開発ワークスペースで SQLX ファイルを作成し、ref() による依存関係管理、ワークフロー実行、Git 連携までの開発フローを解説する。

Dataform 環境を Terraform で構築する

  • Dataform
Dataform 環境を Terraform で構築する

Dataform の環境を Terraform で構築。SA・IAM・Secret Manager・リポジトリ・リリース設定・ワークフロー設定をコード管理する。

Author

rito

rito

  • Backend Engineer
  • Tokyo, Japan
  • PHP 5 技術者認定上級試験 認定者
  • 統計検定 3 級