📊 Associate Data Practitioner

Associate Data Practitioner 問題の一覧 › 3. データパイプラインのオーケストレーション

データ分析チームが SQL のみで BigQuery 内の変換ワークフロー（テーブル間の依存関係、Git によるバージョン管理、スケジュール実行）を管理したい。最適なサービスはどれか。

  1. Dataproc
  2. Dataform
  3. Datastream
  4. Cloud Data Fusion
💡 答えと解説を見る
答え：B（Dataform）
Dataform は SQLX で BigQuery の ELT 変換、依存関係管理、Git 連携、ワークフロー構成によるスケジュール実行を提供する。Data Fusion は GUI ベースの ETL、Dataproc は Spark/Hadoop、Datastream は CDC 用である。
関連サービス
Datastreamサーバーレス CDC。MySQL/PostgreSQL/Oracle 等から BigQuery・GCS へ継続レプリケーション
Dataprocマネージド Spark/Hadoop。既存ジョブの移行向け。ephemeral クラスタ推奨
Cloud Data FusionGUI ノーコード ETL/ELT（CDAP）。Wrangler でデータ整形
DataformBigQuery の SQL 変換（ELT）を依存管理・テスト・バージョン管理付きで運用
← 前の問題次の問題 →🎯 問題で学ぶで解く

※ 学習用に作成したオリジナル問題です。本番試験とは異なります。