데이터 통합
Foundry는 일반적인 추출-변환-로드(ETL) 또는 추출-로드-변환(ELT) 솔루션을 훨씬 넘어서는 매우 구성 가능한 데이터 통합 도구 세트를 제공합니다. Foundry는 데이터 팀의 힘을 더하는 다양한 기능 세트를 통해 시간이 지남에 따른 데이터 통합 비용을 줄이도록 설계되었습니다. 기본 파이프라인 및 실험을 위한 저장소와 컴퓨팅을 제공하는 일반적인 클라우드 서비스와 달리, 핵심 업무를 위한 데이터셋의 관리, 전달 및 검증에는 다양한 레이어의 추가 기능이 필요합니다. Foundry는 세계에서 가장 복잡한 환경의 데이터 통합 백본 역할을 하도록 설계되었습니다.
데이터 연결
이는 구조화되거나 비구조화 또는 반구조화된 모든 유형의 소스 시스템과 일괄 처리, 마이크로 배치 또는 스트리밍과 같은 모든 주요 데이터 전송 방식을 사용하여 연결을 설정하는 확장 가능한 데이터 연결 프레임워크로 시작됩니다. 이 기능은 플랫폼의 데이터 변환 및 데이터 관리 기능과 통합되어 있으며, 데이터 버전의 전체 리니지, 데이터 추출의 협업 관리를 위한 세분화된 보안 및 데이터 동기화 구성의 분기를 포함합니다.
Foundry에서 데이터에 연결하는 방법에 대해 더 알아보기.
데이터 변환
데이터 변환을 위해 Foundry는 다양한 모드의 컴퓨팅을 활용하여 결과물 데이터셋을 생성하는 확장 가능하고, 확장 가능한 데이터 빌드 시스템을 제공합니다. Foundry의 컴퓨팅에 구애받지 않는 "빌드" 프레임워크는 완전히 통합된 보안 및 Data Lineage를 제공하며, 제3자의 컴퓨팅 런타임을 혼합 및 매칭할 수 있습니다. Foundry는 또한 데이터 변환 작성, 변경 관리, 데이터 품질, 파이프라인 스케줄링 및 메타데이터 검사 기능을 통합하는 일련의 기능을 포함하여 데이터 엔지니어를 위한 "미션 컨트롤"을 제공합니다.
Foundry를 사용하여 데이터 변환에 대해 더 알아보기.
파이프라인 관리
Foundry의 파이프라인 관리 기능은 변경 관리, 데이터 품질 및 데이터 로딩 기능을 결합합니다.
Pipeline Builder 애플리케이션은 강력하고 안전한 동시에 빠르고 유연하며 확장 가능한 데이터 파이프라인 전달을 가능하게 합니다. Pipeline Builder에 대해 더 알아보기.
데이터 엔지니어는 생산 파이프라인에 대한 엄격한 릴리스 프로세스를 정의할 수 있으며, 이를 통해 완전히 준수되는 데이터만 생산에 배포될 수 있도록 건강 검사를 포함합니다. 문제가 발견되면 플랫폼은 검출된 불일치에 대한 진단 정보를 제공합니다.
진단 정보는 Foundry의 통합 분석 및 모델링 도구뿐만 아니라 REST API 또는 기타 인터페이스를 통해 출력에 액세스하는 제3자 도구에서도 사용할 수 있습니다.