이 콘텐츠는 learn.palantir.com ↗에서도 확인할 수 있으며 접근성을 위해 여기에 표시됩니다.
Foundry에는 두 가지 프로덕션 데이터 변환 애플리케이션이 있습니다: Pipeline Builder와 Code Repositories. 이 학습 경로에서는 각각을 사용하는 연습 기회를 제공합니다.
Pipeline Builder는 Foundry에서 프로덕션 파이프라인을 구축하기 위한 주요 애플리케이션입니다. Pipeline Builder의 로우/노 코드 지향성으로 인해 더 많은 Foundry 사용자가 파이프라인 개발 및 유지 관리 프로세스에 접근할 수 있습니다. 모든 새로운 데이터 파이프라인은 Pipeline Builder에서 시작하고 Code Repositories를 사용하여 Pipeline Builder에서 사용할 수 없는 특수 코드 기반 로직을 사용해야 합니다. 예를 들어 사용자 정의 라이브러리 사용, 복잡한 사용자 정의 함수 작성 또는 API 호출 등입니다.
이러한 애플리케이션은 함께 사용할 수 있습니다. Pipeline Builder에서 출력한 데이터셋을 Code Repositories의 변형 입력으로 사용할 수 있고 그 반대도 마찬가지입니다.
이 학습 경로에서는 Job Tracker 애플리케이션도 접하게 됩니다. 이 애플리케이션을 사용하면 데이터 엔지니어가 데이터셋 빌드의 상태를 모니터링할 수 있으며 Spark 세부 정보를 포함합니다.