📊 Associate Data Practitioner

Associate Data Practitioner 問題の一覧 › 3. データパイプラインのオーケストレーション

既存の Spark ジョブをクラスタ管理なしで実行したい。ジョブは不定期に動き、クラスタのプロビジョニングや調整の運用を避けたい。最適な選択肢はどれか。

  1. Dataproc Serverless for Spark
  2. Compute Engine に Spark を手動導入
  3. Cloud Functions で Spark を実行
  4. Dataproc の常時稼働クラスタ
💡 答えと解説を見る
答え：A（Dataproc Serverless for Spark）
Dataproc Serverless はクラスタを管理せずに Spark ワークロードをバッチ実行でき、不定期ジョブに向く。常時稼働クラスタは遊休コストと運用が発生し、GCE 手動導入も運用負荷が大きい。Cloud Functions は Spark を実行する用途ではない。
関連サービス
Dataprocマネージド Spark/Hadoop。既存ジョブの移行向け。ephemeral クラスタ推奨
Dataproc Serverlessクラスタ管理不要で Spark バッチを実行
← 前の問題次の問題 →🎯 問題で学ぶで解く

※ 学習用に作成したオリジナル問題です。本番試験とは異なります。