一般的なパイプラインパターン

パイプラインパターンは、一般的なBeamのユースケースを示しています。パイプラインパターンは、実際のBeamデプロイに基づいています。各パターンには、説明、例、および解決策または疑似コードがあります。

ファイル処理パターン - ファイルからの読み取りおよびファイルへの書き込みのパターン

サイド入力パターン - 補足データを処理するためのパターン

パイプラインオプションパターン - パイプラインを構成するためのパターン

カスタムI/Oパターン - パイプラインI/Oのパターン

カスタムウィンドウパターン - ウィンドウ処理関数のパターン

BigQueryパターン - BigQueryIOのパターン

AIプラットフォーム統合パターン - Google Cloud AIプラットフォーム変換を使用するためのパターン

スキーマパターン - スキーマを使用するためのパターン

BQML統合パターン - BigQuery MLをBeamパイプラインに統合するパターン

クロスランゲージパターン - クロスランゲージパイプラインを作成するためのパターン

状態とタイマーのパターン - 状態とタイマーを使用するためのパターン

共有オブジェクトでのキャッシュ - Python SDKを使用して、共有オブジェクトをキャッシュとして使用するためのパターン

パターンの投稿

新しいパイプラインパターンを投稿するには、機能リクエストを作成し、問題の説明に詳細を追加してください。詳細については、貢献を始めるを参照してください。

次のステップ