4. 데이터 파이프라인 스케줄링6 - 실습 요약

본 번역은 검증되지 않았습니다. AIP를 통해 영문원문으로부터 번역되었습니다.

6 - 실습 요약

이 콘텐츠는 learn.palantir.com ↗에서도 사용할 수 있으며 접근성을 위해 여기에 제공됩니다.

✅ 결과물

파이프라인을 clean 결과물까지 실행하는 이벤트 기반 일정을 작성했습니다.

✅ 학습내용

  • Foundry에서 파이프라인 일정은 자체 RID와 권한 체계를 가진 1등급 아티팩트로 취급됩니다.
  • 파이프라인 일정 관리자는 Data Lineage 애플리케이션 내에서 접근할 수 있습니다.
  • 대부분의 파이프라인은 전체 빌드 또는 단일 빌드 모드보다 연결 빌드 모드를 사용해야 합니다.
  • 일정 빌드는 트리거로 정의된 조건이 충족될 때 실행됩니다.
  • 트리거는 이벤트 기반, 시간 기반 또는 두 가지의 조합일 수 있습니다.
  • 대부분의 데이터 파이프라인은 이벤트 기반 트리거를 사용해야 합니다.
  • 실패 시 일정을 중단하고 재시도 값은 3, 실패 사이의 시간은 1분으로 설정하는 것을 권장합니다.
  • 강제 빌드는 데이터 연결에만 사용해야 합니다.
  • Data Connection Sync는 파이프라인의 나머지 부분과 별도로 지정된 일정을 사용해야 합니다.