6. 데이터 파이프라인 건강 모니터링1 - 이 강좌에 대하여

본 번역은 검증되지 않았습니다. AIP를 통해 영문원문으로부터 번역되었습니다.

1 - 이 강좌에 대하여

이 내용은 learn.palantir.com ↗에서도 사용할 수 있으며 접근성을 위해 여기에 제공됩니다.

맥락

생산 파이프라인은 안정성을 요구하며, Foundry는 예상된 동작에서의 이탈에 대해 당신과 당신의 팀을 알릴 수 있는 구성 가능한 체크 및 알림 도구의 스위트를 제공합니다. 그러한 도구 중 하나는 Data Health 서비스로, 데이터셋의 다양한 측면에 대한 사전 구축된 체크의 스위트를 제공합니다. 그리고 이러한 데이터셋이 예를 들어, 일정 빌드의 대상이라면, 그것들은 또한 파이프라인의 전체 건강에 대한 신호를 제공합니다.

⚠️ 강좌 사전 요구 사항

  • DATAENG 05: 이 트랙에서 이전 강좌를 완료하지 않은 경우, 지금 수행하세요.

결과

이 튜토리얼은 Foundry의 Data Health 서비스를 사용하여 생산 파이프라인을 모니터링하는 최고의 사례를 구현하는 실질적인 경험을 제공하는 것입니다. 이 교육의 목표는 파이프라인의 최적의 건강 및 성능을 위해 파이프라인의 적절한 부분에 적절한 체크를 적용할 필요한 모든 것을 갖추도록 하는 것입니다.

🥅 학습 목표

  1. 데이터 건강 체크를 어디에서, 어떻게 적용할지 알아보세요.
  2. 파이프라인의 주요 부분에 추천하는 데이터 건강 체크를 학습하고 적용하세요.
  3. 체크를 조정하는 데 도움이 될 수 있는 측정치를 찾을 수 있는 곳을 알아보세요.
  4. 알림 및 경보 프레임워크를 이해하세요.

💪 Foundry 스킬

  • Data Health 및 Data Lineage 애플리케이션에서 데이터셋 건강 체크를 구성하세요.
  • Scheduler 애플리케이션에서 일정 건강 체크를 구성하세요.
  • 필요에 따라 측정치를 업데이트하는 데 일정 측정치를 사용하세요.
  • 일괄 경고를 위한 그룹 체크를 구성하세요.