データ統合データ接続概要

注: 以下の翻訳の正確性は検証されていません。AIPを利用して英語版の原文から機械的に翻訳されたものです。

概要

Data Connection は、外部システムからのデータを同期して Foundry で使用するためのアプリケーションです。ユーザーは Data Connection を使用して、データ統合、モデリング、オントロジーレイヤーで使用するためのデータを Foundry に同期することができます。さらに、Data Connection は、Webhooks やデータエクスポートを介して外部システムに書き戻しを可能にするアウトバウンド接続の設定を可能にします。

ワークスペースのナビゲーションバーからアイコンを選択して、Data Connection アプリケーションにアクセスします。

Foundry のサイドバーにある Data Connection アプリケーション。

また、アプリケーションポータルで検索することで、Data Connection アプリケーションを見つけることもできます。

アプリケーションポータルで見つけた Data Connection アプリケーション

組織で初めて Foundry をデータに接続する場合は、初期設定ガイドを参照して始めてください。

Foundry は以下の 3つの原則でデータ接続プロセスを標準化します:

  • 堅牢性
  • 拡張性
  • 使用の容易性

堅牢性

しばしば、システム間でデータを接続することは、回復が困難な失敗に繋がる可能性があります。外部環境でユーザーの制御外の問題(例えば、ネットワーク接続の悪さ、ディスクの故障、または応答しないソースシステム)がデータ同期に影響を及ぼし、それが下流の分析パイプラインを壊す可能性もあります。不完全または破損したデータは、技術的な課題だけでなく、気付かれずに使用されたり、緊急のニーズに対応できなかったりすると、組織にとって潜在的に危険です。

Foundry は、失敗時の自動リトライ、シンプルな関数(例えば、ファイルシステムやデータベースの同期)を使用してソースシステムから低複雑度のクエリで小分けにデータを引っ張り出す、そして重大な失敗や他のパイプラインの健康問題をアラートするための統合されたデータヘルス監視システムといった、これらの一般的な失敗ポイントに対して積極的に対応します。これらの機能を組み合わせることで、不完全または破損したデータのリスクを最小限に抑えます。

拡張性

企業は、個々にも統合システムとしても価値を生み出す、多様で複雑なシステム群を持っています。各システムは、統合に必要な要件を持ち、一部のシステムは、通常は統合が困難となる特殊な機能や特徴を必要とします。

Foundry は、よく知られたシステムタイプ(例えば、リレーショナルデータベース、FTPS、HDFS、S3、SFTP、およびローカルディレクトリ)とのアウトオブザボックス統合と、新しいシステムタイプからデータを接続し同期する柔軟性を提供します。多くの場合、新しいシステムは既存のプラグインを再利用したり、少しの変更だけで対応できます。コア機能(例えば、スケジューリングとアップロード)は標準化されているため、接続自体だけを調整する必要があります。

利用可能なソースタイプの全範囲について詳しく学びましょう。

使用の容易性

システム間のデータ接続を管理することは、同期、認証、スケジューリングとオーケストレーション、監視のすべてのステップを担当する管理者にとって、大きな負担となる複雑なプロセスです。

Foundry は、この複雑さをバックエンドサービスが大部分の作業を引き受け、ユーザーがシンプルなフロントエンドユーザーインターフェースを通じてパイプラインの設定と管理を行うことで抽象化します。これにより、通常は複雑な技術的なタスクへの障壁を下げ、より多くのユーザーがデータ接続を行うことが可能になります。