Apache Beam 文件

此頁面提供 Beam 程式設計模型、SDK 和執行器的概念資訊和參考資料的連結。

概念

了解 Beam 程式設計模型和所有 Beam SDK 和執行器通用的概念。

• 從 Beam 模型基礎 開始，取得入門概念資訊。
• 閱讀程式設計指南，其中包含有關 Beam 概念的更詳細資訊，並提供程式碼片段。
• 了解 Beam 的執行模型，以更了解管線的執行方式。
• 瀏覽學習資源，查看我們最喜歡的關於 Beam 的文章和演講。
• 參考詞彙表，了解 Beam 程式設計模型的術語。

管線基礎

• 設計您的管線，方法是規劃管線的結構、選擇要套用至資料的轉換，以及決定您的輸入和輸出方法。
• 建立您的管線，使用 Beam SDK 中的類別。
• 測試您的管線，以盡量減少管線遠端執行的偵錯。

SDK

尋找所有可用的 Beam SDK 的狀態和參考資訊。

轉換目錄

Beam 的轉換目錄包含 Beam 內建轉換的說明和程式碼片段。

• Java 轉換目錄
• Python 轉換目錄

執行器

Beam 執行器會在特定的（通常是分散式）資料處理系統上執行 Beam 管線。

可用的執行器

選擇執行器

Beam 旨在讓管線可以在不同的執行器之間移植。但是，鑑於每個執行器都有不同的功能，它們在實作 Beam 模型中的核心概念時也具有不同的能力。功能矩陣提供了執行器功能的詳細比較。

選擇要使用的執行器之後，請參閱該執行器的頁面，以取得有關任何初始執行器特定設定以及任何用於組態其執行所需的或選用的 PipelineOptions 的詳細資訊。您可能還想參考Java、Python 或 Go 的快速入門，以取得有關執行範例 WordCount 管線的說明。