11 - 유지 관리

Pipeline Builder에서 데이터셋을 빌드하거나(특수한 코드가 필요한 경우 저장소에서) 일정 및 로직을 관리하기 위한 여러 보완적인 파이프라인 유지 관리 애플리케이션을 사용할 수 있습니다. 이러한 애플리케이션은 이러한 학습 경로에서 만나게 됩니다.

• Data Lineage, Foundry 소개 과정에서 알게 된 것으로, 데이터 신선도, 건강 상태, 리소스 사용 및 하류 종속성을 이해하기 위한 파이프라인 시각화 및 탐색 도구를 제공합니다.
• Scheduler 애플리케이션은 Data Lineage에서 접근할 수 있으며, 정의된 시간 및/또는 이벤트 기반 트리거가 발생할 때 함께 빌드되어야 하는 데이터셋을 정의할 수 있습니다. 또한 파이프라인 측정치를 추적하고 추가적인 일정 수준 건강 검사를 제공합니다.
• Data Health 애플리케이션을 사용하여 파이프라인을 모니터링하고 정의된 조건이 충족될 때 알림을 받습니다.