部落格
2018/10/31
2018 年 Beam 歐洲高峰會首屆活動 - 會後報導
大約一個月前，我們很高興在倫敦 Level39 迎接 Beam 社群，參與首屆 Beam 倫敦高峰會。
首屆 Beam 倫敦高峰會第一天全速進行中！@SkyUK @GCPcloud @Talend @PlantixApp 等公司的議程！ #ApacheBeam #apachebeamlondon #l39 #level39 @ApacheBeam #summit pic.twitter.com/aEESFnbgxT
— Matthias Baetens 🌆 (@matthiasbaetens) 2018 年 10 月 1 日
首屆活動！
本次高峰會首屆活動是免費的，有超過 125 人報名。我們舉辦了兩天的活動；第一天著重於專案的路線圖、ASF 以及使用 Beam 的公司的案例。第二天則分為不同的主題 (入門和進階)。這些簡報與工作坊是為超過 80 位參與者所舉辦的，除此之外，還有一些其他的活動，像是討論、腦力激盪會議、使用者體驗攤位和簽名活動。我們能夠為參與者提供來自以下眾多公司的 17 場會議：Google、Spotify、Talend、Sky、Amazon、Data Artisans、Datatonic、Vente Exclusive、ML6、Flumaion、Plantix、Polidea、Seznam 等等！
#### 主題包括使用 Python 在 Flink 上執行 Beam
千萬別錯過 @snntrable 在 2018 年 10 月 2 日於 Beam 倫敦高峰會上的議程，內容是有關使用 #Python、@ApacheBeam 和 @ApacheFlink 的串流管線！在此註冊：https://#/wblzUeiTIg #streamprocessing #BigData #MachineLearning pic.twitter.com/7Ph51WqspW
— data Artisans (@dataArtisans) 2018 年 9 月 26 日
#### 透過 TensorFlow 轉換整合使用 Beam 進行機器學習
很高興能聽到 @FsMatt 在 #BeamSummit 上關於 TensorFlow 轉換的演講！@ApacheBeam @TensorFlow @Level39CW
— datatonic (@teamdatatonic) 2018 年 10 月 2 日
請查看他的演示程式碼：https://#/8IS41A2aF2 https://#/UWytiudmRO
#### 可移植性層是一個重要的主題
@stadtlegende 關於為 #ApacheBeam 新增可攜性的演講非常精彩，這是一個很棒的里程碑，也是讓 Apache Beam 的願景實現的下一步！pic.twitter.com/M9jERlTeAE
— Matthias Feys (@FsMatt) 2018 年 10 月 2 日
#### 還有關於如何建立您自己的 SDK 的會議
Robert Bredshaw 解釋如何建立新的 @ApacheBeam SDK。#BeamSummit pic.twitter.com/Bj84GJimdo
— Maximilian Michels 🧗 (@stadtlegende) 2018 年 10 月 2 日
簡報
在高峰會結束後，您可以查看所有會議的簡報。
第一天：案例
- 第一天 - 第一場 - Sky 使用 Apache Beam 進行大規模串流分析
- 第一天 - 第二場 - 使用 Apache Beam 執行量化分析
- 第一天 - 第三場 - Talend Data Streams：使用 Apache Beam 建置大數據管線
- 第一天 - 第四場 - 從遷移到 Apache Beam 進行地理資料視覺化中所學到的經驗
第二天：入門主題
- 第二天 - 入門 - 第一場 - 使用 Apache Beam 的開發環境
- 第二天 - 入門 - 第二場 - 邁向可攜性及其它
- 第二天 - 入門 - 第三場 - 在 Flink 上使用 Beam 的 Python 串流管線
- 第二天 - 入門 - 第四場 - 執行器如何執行 Beam 管線
- 第二天 - 入門 - 第五場 - Apache Beam 中的 IO 整合測試架構
第二天：進階主題
- 第二天 - 進階 - 第一場 - 使用 Apache Beam 和 tf.Transform 為 TensorFlow 管線進行預處理
- 第二天 - 進階 - 第二場 - 將串流資料導入 BigQuery：使用 Protobuf 產生結構描述
- 第二天 - 進階 - 第三場 - 實作 SplittableParDo
- 第二天 - 進階 - 第四場 - 使用 Scala 和 Scio 在 Google Cloud 上進行大數據處理
- 第二天 - 進階 - 第五場 - 衛星影像的土地利用分類
- 第二天 - 進階 - 第六場 - Beam SDK 的 Java 8 DSL
- 第二天 - 進階 - 第七場 - 所以，您想要撰寫 Beam SDK 嗎？
錄影
如果您偏好連同投影片重新觀看錄製的演講，我們也很樂意分享大部分會議的錄影內容
第一天：案例
- 第一天 - 第一場 - Sky 使用 Apache Beam 進行大規模串流分析
- 第一天 - 第二場 - 使用 Apache Beam 執行量化分析
- 第一天 - 第三場 - Talend Data Streams：使用 Apache Beam 建置大數據管線
- 第一天 - 第四場 - 從遷移到 Apache Beam 進行地理資料視覺化中所學到的經驗
第二天：進階主題
- 第二天 - 進階 - 第一場 - 使用 Apache Beam 和 tf.Transform 為 TensorFlow 管線進行預處理
- 第二天 - 進階 - 第二場 - 將串流資料導入 BigQuery：使用 Protobuf 產生結構描述
- 第二天 - 進階 - 第三場 - 實作 SplittableParDo
- 第二天 - 進階 - 第四場 - 使用 Scala 和 Scio 在 Google Cloud 上進行大數據處理
- 第二天 - 進階 - 第五場 - 衛星影像的土地利用分類
- 第二天 - 進階 - 第六場 - Beam SDK 的 Java 8 DSL
- 第二天 - 進階 - 第七場 - 所以，您想要撰寫 Beam SDK 嗎？
總結
我們也在收集關於高峰會的回饋和想法 - 請將您的想法和討論新增到 郵件清單上的主題。
總而言之，我們希望參與者喜歡我們首屆的高峰會，並感謝 我們的贊助商 Google、Datatonic、Vente-Exclusive，使這次活動能夠實現。
結束 #BeamSummit 的第一天。從 #level39 場館看到的景色非常棒。對這個陣容感到非常滿意。pic.twitter.com/7FhokKbQY5
— Alex Van Boxel (@alexvb) 2018 年 10 月 1 日