1. Data Pipeline Foundations1 - このコースについて
Warning

注: 以下の翻訳の正確性は検証されていません。AIPを利用して英語版の原文から機械的に翻訳されたものです。

1 - このコースについて

learn.palantir.com でも以下の内容をご覧いただけますが、アクセシビリティの観点から、ここに掲載しています。

データパイプラインの作成は、従来、遅く、面倒で、費用がかかる作業であり、結果として以下のような管理が困難なパイプラインのパッチワークが生じることがよくあります。

  1. 維持費用がかかる
  2. 非技術者にはアクセスしにくい
  3. 部族知識によって維持されている

このコースでは、パイプラインの構築と維持を民主化し、効率化することで、このような型を破るために Foundry を使用する方法について説明します。

📚 推薦文献(約8分)

Foundry のデータ変換とパイプライン機能がデータ品質の課題にどのように対処するかについて、この概要 ↗を確認してください。

⚠️ コースの前提条件

データエンジニアリングのラーニングパスで Foundry Foundations ↗Intro to Foundry をまだ完了していない場合は、今すぐ行ってください。

成果

このコースでは、データを変換する際に使用する Foundry の語彙とアプリケーションを紹介します。

⚠️ このコースは 2 つのトラックに分かれていることに注意してください。

  1. Pipeline Builder (コースプレフィックス "Builder")
  2. Code Repositories (コースプレフィックス "Repositories")

両方のトラックに従うことはもちろん自由ですが、まずは "Builder" トラックを優先することをお勧めします。

プレフィックスのないコースは両方のトラックで共有されています。

🥅 学習の目的

  • Foundry のデータパイプラインの定義と基本的な構造を理解する。
  • ラーニングパスを通じて使用するデータ統合アプリケーションの一連の手順を学ぶ。

💪 Foundry のスキル

  • Data Lineage アプリケーションでパイプラインを探索する。
  • データパイプラインの最初のステージのプロジェクト構造を作成する。