注: 以下の翻訳の正確性は検証されていません。AIPを利用して英語版の原文から機械的に翻訳されたものです。
データ接続と統合
Foundry は、典型的な抽出-変換-ロード (ETL) や抽出-ロード-変換 (ELT) ソリューションをはるかに超える、高度に設定可能なデータ接続および統合ツールのセットを提供します。Foundry は、豊富な機能群を通じてデータ統合のコストを時間とともに削減するように設計されています。これらの機能は、データチームの力を増幅する役割を果たします。一般的なクラウドサービスが基本的なパイプラインと実験のためのストレージと計算を提供する一方で、重要なオペレーションのためのデータセットを管理、配信、検証するためには、さらに多くの機能層が必要です。Foundry は、世界で最も複雑な環境のデータ統合のバックボーンとして機能するように設計されています。
データの接続
これは、構造化、非構造化、半構造化のすべての種類のソースシステムとの接続を確立し、バッチ、マイクロバッチ、ストリーミングなど、すべての主要なデータ転送手法と統合する拡張可能なデータ接続フレームワークから始まります。この機能は、プラットフォームのデータトランスフォームとデータ管理機能と統合されており、データバージョンの完全なデータフロー、データ抽出の共同作業に対する細かいセキュリティ、データ同期設定のブランチングを含みます。
データ変換
データ変換のために、Foundry は、複数の計算モードを活用して出力データセットを生成する、拡張可能でスケーラブルなデータビルドシステムを提供します。Foundry の計算非依存型の "Build" フレームワークは、完全に統合されたセキュリティとデータフローを提供し、サードパーティの計算ランタイムの混在とマッチングを可能にします。Foundry には、データエンジニアのための "ミッションコントロール" を提供するために統合的に作用する、データ変換の作成、変更管理、データ品質、パイプラインスケジューリング、メタデータ内省の能力の統合スイートも含まれています。
パイプライン管理
Foundry の パイプライン管理 機能は、変更管理、データ品質、データローディング機能を組み合わせています。
Pipeline Builder アプリケーションは、堅牢性とセキュリティを提供しながら、迅速で柔軟でスケーラブルなデータパイプラインの提供を可能にします。Pipeline Builder について詳しく学ぶ
データエンジニアは、本番パイプラインのための厳格なリリースプロセスを定義でき、完全に準拠したデータのみが本番環境にデプロイされることを保証するヘルスチェックを含みます。問題が見つかった場合、プラットフォームは検出された不一致についての診断を提供します。
診断は、Foundry の統合分析ツールおよびモデリングツール、および REST API や他のインターフェースを経由して出力にアクセスするサードパーティツールの両方で利用可能です。