1. データパイプラインの基礎1 - このコースについて

注: 以下の翻訳の正確性は検証されていません。AIPを利用して英語版の原文から機械的に翻訳されたものです。

1 - このコースについて

データパイプラインの作成は伝統的に時間がかかり、雑然としており、高コストな作業であり、結果として管理不能なパイプラインの寄せ集めが生じることがよくあります。

  1. 維持費が高い
  2. 非技術者にとってアクセスが難しい
  3. 部族知識によって維持されている。

このコースは、パイプラインの構築と維持を民主化し、効率化するために Foundry を利用する方法についてです。

📚 推薦文献(約8分)

Foundry のデータ変換とパイプライン機能がデータ品質の課題にどのように対応するかについて、このプライマーをレビューしてください。

⚠️ コースの前提条件

まだ Foundry Foundations(外部リンクのビデオリソース)と Data Engineering ラーニングパスの Intro to Foundry を完了していない場合は、今すぐ行ってください。

アウトカム

このコースでは、データを変換する際に使用する Foundry の語彙とアプリケーションを紹介します。

⚠️ このコースは2つのトラックに分けられます:

  1. Pipeline Builder(コース接頭辞 "Builder")
  2. Code Repositories(コース接頭辞 "Repositories")

両方のトラックをフォローする自由はありますが、まず "Builder" トラックを優先することをお勧めします。

接頭辞がないコースは両方のトラックで共有されます。

🥅 学習の目的

  • Foundry データパイプラインの定義と基本的な構造を理解する。
  • ラーニングパスを通じて使用するデータ統合アプリケーションの順序を学ぶ。

💪 Foundry のスキル

  • Data Lineage アプリケーションでパイプラインを探索する。
  • ユーザーのデータパイプラインの最初のステージのためのプロジェクト構造を作成する。