11 - スケジュールの健康状態のチェックを設定する：スケジュールの期間

📖 タスクの概要

ビルドスケジュールの所要時間が予想以上に長い場合、何か問題がある可能性があり、ユーザーの注意が必要です。これは、入力データの量が増えた、またはデータパーティションのサイズ/数が現在の Spark プロファイルで効率的に計算できる以上に増大したことを意味する場合があります。Foundry 環境で Spark リソースの競合が平均以上に高い場合もあります。いずれの場合でも、スケジュールされたビルド（つまり、論理的に一緒に、または順序立ててビルドする1つ以上のジョブ）が完了するまでの時間を把握しておくことで、サービスレベル契約や下流の最新性の期待を違反するリスクを最小限に抑えます。

🔨 タスクの説明

1. ユーザーのスケジュールメトリクスページの Health タブで、Time ▾ ドロップダウンをクリックし、Schedule Duration を選択します。
2. まだスケジュールの実行数が十分でないため、期待される期間を決定するためにメトリクスを使用することはできません。2番目のチェックボックスにチェックを入れ、しきい値を中央値よりも1つ偏差が大きい値に設定します。これは、最も最近の5回の実行によって定義されます。
   • スケジュールの実行数が増えたら、ここに戻ってルールを特定の時間のしきい値に更新することができます。
3. このチェックをユーザーの Flight Alerts Schedule チェックグループに追加します。