Apache Beam


Apache_Beam

Apache Beamは、ETL、バッチおよびストリーム(連続)処理を含むデータ処理パイプラインを定義および実行するためのオープンソースの統合プログラミングモデルです。 Beamパイプラインは、提供されているSDKの1つを使用して定義され、Apache Flink、Apache Samza、Apache Spark、Google Cloud DataflowなどのBeamでサポートされているランナー(分散処理バックエンド)の1つで実行されます。 Apache Beam 原作者グーグル 開発者
Apache Software Foundation
初回リリース
2016年6月15日; 5年前 (2016-06-15)
安定リリース
2.30.0(2021年6月9日; 3か月前) (2021-06-09)
リポジトリ
ビームリポジトリ
で書かれている
Java、Python、Go
オペレーティング・システム
クロスプラットフォーム
ライセンス
Apacheライセンス2.0
Webサイト
ビーム.apache .ORG

コンテンツ
1 歴史
1.1 タイムライン
2 も参照してください
3 参考文献

歴史
Apache Beam は、Dataflowモデルペーパーの実装の1つです。 Dataflowモデルは、Googleでの分散処理の抽象化、特にFlumeJava とMillwheelに関する以前の作業に基づいています。
Googleは、2014年にDataflowモデルのオープンSDK実装と、Dataflowをローカル(非分散)およびGoogle CloudPlatformサービスで実行する環境をリリースしました。

タイムライン
バージョン 発売日
現在の安定バージョン: 2.32.0 2021-08-25
古いバージョン、メンテナンスされていません: 2.31.0 2021-07-08
古いバージョン、メンテナンスされていません: 2.30.0 2021-06-09
古いバージョン、メンテナンスされていません: 2.29.0 2021-04-27
古いバージョン、メンテナンスされていません: 2.28.0 2021-02-22
古いバージョン、メンテナンスされていません: 2.27.0 2021-01-08
古いバージョン、メンテナンスされていません: 2.26.0 2020-12-11
古いバージョン、メンテナンスされていません: 2.25.0 2020-10-23
古いバージョン、メンテナンスされていません: 2.24.0 2020-09-18
古いバージョン、メンテナンスされていません: 2.23.0 2020-07-29
古いバージョン、メンテナンスされていません: 2.22.0 2020-06-08
古いバージョン、メンテナンスされていません: 2.21.0 2020-05-27
古いバージョン、メンテナンスされていません: 2.20.0 2020-04-15
古いバージョン、メンテナンスされていません: 2.19.0 2020-02-04
古いバージョン、メンテナンスされていません: 2.18.0 2020-01-23
古いバージョン、メンテナンスされていません: 2.17.0 2020-01-06
古いバージョン、メンテナンスされていません: 2.16.0 2019-10-07
古いバージョン、メンテナンスされていません: 2.15.0 2019-08-22
古いバージョン、メンテナンスされていません: 2.14.0 2019-08-01
古いバージョン、メンテナンスされていません: 2.13.0 2019-05-22
古いバージョン、メンテナンスされていません: 2.12.0 2019-04-25
古いバージョン、メンテナンスされていません: 2.11.0 2019-02-26
古いバージョン、メンテナンスされていません: 2.10.0 2019-02-01
古いバージョン、メンテナンスされていません: 2.9.0 2018-12-13
古いバージョン、メンテナンスされていません: 2.8.0 2018-10-29
古いバージョン、メンテナンスされていません: 2.7.0(LTS) 2018-10-03
古いバージョン、メンテナンスされていません: 2.6.0 2018-08-08
古いバージョン、メンテナンスされていません: 2.5.0 2018-06-26
古いバージョン、メンテナンスされていません: 2.4.0 2018-03-20
古いバージョン、メンテナンスされていません: 2.3.0 2018-01-30
古いバージョン、メンテナンスされていません: 2.2.0 2017-12-02
古いバージョン、メンテナンスされていません: 2.1.0 2017-08-23
古いバージョン、メンテナンスされていません: 2.0.0 2017-05-17
古いバージョン、メンテナンスされていません: 0.6.0 2017-03-11
古いバージョン、メンテナンスされていません: 0.5.0 2017-02-02
古いバージョン、メンテナンスされていません: 0.4.0 2016-12-29
古いバージョン、メンテナンスされていません: 0.3.0 2016-10-31
古いバージョン、メンテナンスされていません: 0.2.0 2016-08-08
古いバージョン、メンテナンスされていません: 0.1.0 2016-06-15
伝説:
古いバージョン
古いバージョン、まだ維持されています
最新バージョン
最新のプレビューバージョン
将来のリリース

も参照してください
Apache SoftwareFoundationプロジェクトのリスト

参考文献
^ 「ブログ」。beam.apache.org。Apache SoftwareFoundation 。2021-06-09を取得。
^ ウッディー、アレックス「ApacheBeamの野心的な目標:ビッグデータ開発の統合」。Datanami 。
^ 「クラウドデータフロー-バッチ&ストリームデータ処理」。
^ アキダウ、タイラー; シュミット、エリック; ホイットル、サム; ブラッドショー、ロバート; チェンバース、クレイグ; チェルニャク、スラヴァ; フェルナンデス-モクテスマ、ラファエルJ。; Lax、Reuven; McVeety、Sam; ミルズ、ダニエル; ペリー、フランシス「データフローモデル」(PDF)。VLDB基金の議事録。8(12):1792–1803。土井:10.14778 /2824032.2824076 。
^ チェンバーズ、クレイグ; ラニワラ、アシッシュ; ペリー、フランシス; アダムス、スティーブン; ヘンリー、ロバートR。; ブラッドショー、ロバート; ワイゼンバウム、ネイサン「FlumeJava:簡単で効率的なデータ並列パイプライン」(PDF)。プログラミング言語の設計と実装に関する第31回ACMSIGPLAN会議の議事録。ACM:363–375。土井:10.1145 /1806596.1806638。S2CID 14888571。2016年9月23日にオリジナル(PDF)からアーカイブされました。   ^ アキダウ、タイラー; ホイットル、サム; バリコフ、アレックス; Bekiroğlu、カヤ; チェルニャク、スラヴァ; ハーバーマン、ジョシュ; Lax、Reuven; McVeety、Sam; ミルズ、ダニエル; ノードストローム、ポール「MillWheel」(PDF)。VLDB基金の議事録。6(11):1033–1044。土井:10.14778 /2536222.2536229。2016年2月1日にオリジナル(PDF)からアーカイブされました。
^ ポインター、イアン。「ApacheBeamはビッグデータ用のuber-APIになりたい」。InfoWorld 。
 title=