menu
arrow_back

Building Dynamic Pipelines in Cloud Data Fusion Using Macros

Building Dynamic Pipelines in Cloud Data Fusion Using Macros

1時間 30分 クレジット: 7

GSP809

Google Cloud Self-Paced Labs

Overview

  • In Data Fusion, you can use Macros to introduce dynamic variables for plugin configurations so that you can specify the variable substitutions at runtime.

  • Macros are defined as variables wrapped inside of a **${ }**. Plugins that have macro enabled fields will contain a blue M icon.

10-01-overview.png

  • A typical use case for macros is to allow for variable substitution when the pipeline is run, so instead of using hard coded paths, you could use dynamic paths. This way you’re able to specify which particular file you want to process when the pipeline is invoked. In addition to macros you'll use wildcards as well.

Qwiklabs に参加してこのラボの残りの部分や他のラボを確認しましょう。

  • Google Cloud Console への一時的なアクセス権を取得します。
  • 初心者レベルから上級者レベルまで 200 を超えるラボが用意されています。
  • ご自分のペースで学習できるように詳細に分割されています。
参加してこのラボを開始
スコア

—/40

Create a bucket using gcp console

ステップを実行

/ 10

Create cloud data fusion instance

ステップを実行

/ 10

Test your pipeline

ステップを実行

/ 10

Build and execute dynamic pipeline.

ステップを実行

/ 10