プロダクトに関するFAQPipeline Builder

注: 以下の翻訳の正確性は検証されていません。AIPを利用して英語版の原文から機械的に翻訳されたものです。

Pipeline Builder

データパイプラインのビルドで不正な CSV 行を削除してエラーを回避するにはどうすればよいですか?

データセットプレビューのセクションで、パースオプション -> 不揃いな行を削除機能を使用して、不正な行を削除します。

タイムスタンプ: 2024年3月1日

データセットの異なる組み合わせごとに和集合を作成せずに、1個のデータ加工で複数のデータセットの和集合を作成するにはどうすればよいですか?

入力数に制限のない和集合ボードにすべてのデータセットを接続するか、すべての入力をドラッグして選択し、和集合のデータ加工オプションをクリックします。

タイムスタンプ: 2024年4月11日

LLM を使用ボードで LLM を呼び出すバッチ操作はありますか?それとも行ごとに呼び出されますか?

LLM は行ごとに呼び出されますが、高速化のために操作はエグゼキューター間で並列化されます。

タイムスタンプ: 2024年3月28日

Pipeline Builder で OCR を使用して PDF 内の画像からテキストを抽出する方法はありますか?

はい、Pipeline Builder では、PDF のテキスト抽出のデータ加工で OCR(光学文字認識)抽出方式を使用して、PDF 内の画像からテキストを抽出できます。

タイムスタンプ: 2024年4月10日

設定されたイベント時間ウィンドウよりも遅れて行が到着した場合、「時間制限付き重複削除」関数はどのように動作しますか?

時間制限付き重複削除関数は、重複しているかどうかにかかわらず、設定されたイベント時間ウィンドウよりも遅れて到着した行を削除します。

タイムスタンプ: 2024年3月20日

パイプライン A の出力を新しいデータセットに置き換え、パイプライン A の以前の出力データセットを別のパイプライン(パイプライン B)の出力にし、すべてのパイプラインの出力スキーマを同じにすることはできますか?

はい、Pipeline Builder ではデータセットを新しい出力で上書きできます。これは、既存のデータセットの所有権を新しい出力に変更する1回限りの操作です。必要な権限があり、必要な手順に従えば、目的のデータセットをパイプライン B の出力として設定できます。エラーを回避し、パイプラインを正常にデプロイするには、すべてのパイプラインの出力スキーマが入力データ加工ノードのスキーマと一致していることが重要です。

タイムスタンプ: 2024年4月13日

Pipeline Builder で使用するカスタムユーザー定義関数(UDF)を実装するにはどうすればよいですか?

Pipeline Builder でカスタムユーザー定義関数(UDF)を実装するには、UDF の作成と使用に関するドキュメントと、Pipeline Builder で任意の Java コードを実行する方法を参照してください。

タイムスタンプ: 2024年4月19日

CSV ファイルをアップロードしてビルドされるデータセットに行番号を追加するにはどうすればよいですか?

データセットプレビューのスキーマを編集オプションで、行番号を有効にできます。

タイムスタンプ: 2024年4月18日

Pipeline Builder で構造体の列を JSON 文字列に変換するにはどうすればよいですか?

JSON to string 式を使用して、構造体の列を JSON 文字列に変換できます。

タイムスタンプ: 2024年6月14日

Pipeline Builder にあるデプロイ済みデータセットのプレビューと、実際のデータセット表示とで行数が異なるのはなぜですか?

プレビューに入力サンプリング戦略が適用されている場合、行数に差が生じる可能性があります。また、非決定論的なデータ加工によって行数が変わる可能性があることも考慮してください。

タイムスタンプ: 2024年6月28日

パイプラインによって作成された Checkpoint データセットをクリーンアップするにはどうすればよいですか?

Checkpoint データセットを作成したパイプラインをゴミ箱に移動すると、Checkpoint データセットもゴミ箱に移動されるはずです。

タイムスタンプ: 2024年4月24日

Pipeline Builder のパイプラインで、null の文字列値を特定の文字列(たとえば「no data」)に対応付けるにはどうすればよいですか?

Pipeline Builder のパイプラインでこれを実現するには、2つの方法があります。

  1. Coalesce 関数を使用します。たとえば、A = coalesce(A, "no data") とします。A が null の場合、「no data」が返されます。
  2. ケースボードを使用します。

どちらの方法でも、null 値を指定した文字列に対応付けることができます。

タイムスタンプ: 2024年7月11日

列のグループ内の null 値を補完する方法はありますか?

はい、複数の列に適用のデータ加工を使用して、異なる列の null 値を補完できます。

タイムスタンプ: 2024年4月24日