注: 以下の翻訳の正確性は検証されていません。AIPを利用して英語版の原文から機械的に翻訳されたものです。

Lakehouse Iceberg REST カタログ

Google Cloud Storage コネクターを使用して、Foundry を Google Cloud Lakehouse に接続します。Lakehouse は、Google Cloud Storage ソース上の Iceberg カタログとして設定されます。登録された仮想テーブルは Iceberg 形式を使用し、その Lakehouse カタログ内のテーブルを参照します。

サポートされる機能

機能ステータス
仮想テーブル🟢 一般提供
手動登録🟢 一般提供
自動登録🟢 一般提供
テーブル入力🟢 一般提供:Code Repositories、Pipeline Builder での Iceberg ↗
テーブル出力🟢 一般提供:Code Repositories、Pipeline Builder での Iceberg ↗
インクリメンタル(差分処理)パイプライン🟢 一般提供:APPEND のみ
計算のプッシュダウン🔴 利用不可

セットアップ

Lakehouse カタログのセットアップは、Google Cloud Storage コネクターの設定の一部です。Lakehouse を設定するには、Google Cloud Storage ソースにカタログ設定を追加し、Lakehouse カタログを選択します。

同じ Google Cloud Storage ソースを、Lakehouse カタログと bring-your-own-bucket(BYOB)Iceberg ストレージの両方に使用することはできません。ワークフローごとに別のソースを作成してください。Lakehouse ソースではカタログを Lakehouse カタログに設定し、BYOB ソースではカタログ設定を指定せずに設定します。

認証、ネットワーク、およびソース設定の詳細については、Google Cloud Storage の Lakehouse カタログのセットアップ手順を参照してください。

仮想テーブルを登録する

Lakehouse からテーブルを登録するには、設定済みの Google Cloud Storage ソースを開き、形式を Iceberg に設定して仮想テーブルを登録します。ワークフロー全体については、Google Cloud Storage の登録手順を参照してください。