4 - スケジュールのビルド時期の定義

📖 タスクの概要

スケジュールされたビルドは、トリガーで定義された条件が満たされた場合に実行されます。トリガーはイベントベース（例：データセットa、b、cが正常に更新されたときに実行）、時間ベース（例：2日おきの03:00に実行）、またはその両方の組み合わせにすることができます。 このタスクでは、パイプラインのスケジュールを開始するための多次元イベントトリガーを定義します。

📚 推薦文献（約5分で読めます）

進む前に、スケジューラーのドキュメントにアクセスして、トリガーについてもっと詳しく読んでください。このチュートリアルでは、簡単なトリガー設定を実装しますが、データエンジニアは利用可能な複雑さを把握しておく必要があります。

🔨 タスクの説明

1. shift キーを押しながら、グラフ上の raw/flight_alert_raw、priority_mapping_raw、および status_mapping_raw ノードを選択し、それらを トリガー として定義します。これにより、データセットがスケジューラーパネルの ビルド時期 セクションに表示されます。

   ただし、もっと複雑なトリガーを有効にしたいとします：raw/flight_alert_raw データセットの変換コードが更新された場合 または status_mapping_raw と priority_mapping_raw が 正常に実行された 場合に、パイプラインを更新します。

2. スケジューラーパネルの ビルド時期 セクションで、複数の時間またはイベント条件が満たされたとき のラジオボタンをクリックします。これにより、選択したトリガーがライトブルーの「ピル」として表示されるテキストエリアが開きます。

3. テキストエリア内の Data updated for flight_alerts_raw 項目をクリックして、トリガー定義ウィンドウを開きます。デフォルトでは、データセットをトリガーとして設定すると、トリガーデータセットに新しいトランザクションがあった場合（例： "更新されたデータ"がある場合）にスケジュールが開始されます。トリガーが、データセットを計算するロジックが更新されたときに発火するように変更しましょう。トリガーロジックを Data updated ▾ から New logic ▾ に変更し、下の画像に示すようにします。次に、適用 をクリックします。

   

4. トリガー条件のテキストエリアで、右側の All(AND) ▾ ドロップダウンメニューをクリックし、Advanced configuration を選択します。

5. この構成を実現するために、必要なブーリアン条件と括弧を手動で追加します：

   ( New logic for flight_alerts_raw ) OR (
   Data updated for status_mapping_raw AND
   Data updated for priority_mapping_raw )
   

ℹ️ データパイプラインでは、イベントベースのトリガーを使用するのが最適です。データコネクションの同期、書き戻しデータセット、およびニッチなユースケースには、時間を基準にしたスケジュールを使用してください。