데이터 통합Data Connection개요

본 번역은 검증되지 않았습니다. AIP를 통해 영문원문으로부터 번역되었습니다.

전체보기

Data Connection은 외부 시스템에서 데이터를 동기화하여 Foundry에서 사용할 수 있는 애플리케이션입니다. 사용자는 Data Connection을 사용하여 Foundry에 데이터를 동기화하여 데이터 통합, 모델링 및 온톨로지 레이어에서 사용할 수 있습니다. 또한 Data Connection은 Webhooks 및 데이터 내보내기를 통해 외부 시스템으로 writeback을 가능하게 하는 아웃바운드 연결을 설정할 수 있습니다.

작업공간 탐색 표시줄에서 아이콘을 선택하여 Data Connection 애플리케이션에 액세스하세요.

Foundry 사이드바에서 Data Connection 애플리케이션.

애플리케이션 포털에서 검색하여 Data Connection 애플리케이션을 찾을 수도 있습니다.

애플리케이션 포털에서 찾은 Data Connection 애플리케이션

그룹에서 처음으로 Foundry를 데이터와 연결하는 경우 초기 설정 가이드를 참조하여 시작하세요.

Foundry는 다음 세 가지 원칙으로 데이터 연결 프로세스를 표준화합니다:

  • 견고성
  • 확장성
  • 사용 편의성

견고성

시스템 간 데이터 연결은 종종 복구가 어려운 실패에 취약합니다. 사용자의 제어를 벗어난 외부 환경의 문제(예: 네트워크 연결 상태가 좋지 않음, 디스크 오류 또는 응답하지 않는 소스 시스템)가 데이터 동기화에 영향을 미칠 수 있으며, 이로 인해 하류 분석 파이프라인도 손상될 수 있습니다. 불완전하거나 손상된 데이터는 기술적인 도전뿐만 아니라, 눈에 띄지 않거나 급한 필요에 사용할 수 없게 되면 그룹에 위험을 초래할 수도 있습니다.

Foundry는 실패 시 자동 재시도, 소스 시스템에서 파일 시스템 및 데이터베이스 동기화와 같은 간단한 함수를 사용하여 작은 배치로 데이터를 추출하고, 중요한 실패와 파이프라인 건강 문제를 알리고 모니터링하는 통합 데이터 건강 모니터링 시스템을 사용하여 이러한 일반적인 실패 지점을 미리 해결합니다. 이러한 기능들이 결합되어 불완전하거나 손상된 데이터의 위험을 최소화합니다.

확장성

기업은 개별적으로 및 통합 시스템으로 가치를 더하는 다양한 복잡한 시스템 배열을 가지고 있습니다. 각 시스템은 통합에 대한 자체 요구 사항을 가지며 일부 시스템은 일반적으로 통합하기 어려울 수 있는 독특한 기능 또는 기능이 필요합니다.

Foundry는 관계형 데이터베이스, FTPS, HDFS, S3, SFTP 및 로컬 디렉토리와 같은 잘 알려진 시스템 유형과의 OOTB 통합을 제공하며 새로운 시스템 유형에서 데이터를 연결하고 동기화하는 유연성을 제공합니다. 많은 경우 기존 플러그인을 재사용하거나 약간의 변경만으로 새로운 시스템을 사용할 수 있습니다. 핵심 기능(예: 스케줄링 및 업로드)은 표준화되어 연결 자체만 조정해야 합니다.

사용 가능한 소스 유형의 전체 범위에 대해 더 알아보기

사용 편의성

시스템 간 데이터 연결 관리는 동기화, 인증, 스케줄링 및 오케스트레이션, 모니터링을 담당하는 관리자에게 상당한 부담을 주는 복잡한 과정입니다.

Foundry는 사용자가 간단한 프론트엔드 사용자 인터페이스를 통해 파이프라인을 설정하고 관리하면서 대부분의 작업을 수행하는 백엔드 서비스로 이러한 복잡성을 추상화합니다. 이렇게 하면 일반적으로 복잡한 기술적 작업에 대한 진입 장벽이 낮아져 더 많은 사용자가 데이터 연결을 수행할 수 있습니다.