Apache Beam

Apache Beam是一个开源统一编程模型，用于定义和执行数据处理管道，包括ETL、批处理和流（连续）处理。 Beam流水线是使用提供的SDK之一定义的，并在Beam支持的一个运行器（分布式处理后端）中执行，包括、Apache Flink、Apache Gearpump（孵化中）、、Apache Spark和Google Cloud Dataflow。

它被称为“大数据的超级API”。

 历史 
Apache Beam是数据流模型文件的一种实现。数据流模型基于以前关于Google的分布式处理抽象的工作，特别是FlumeJava和Millwheel。

Google于2014年发布了数据流模型的开放式SDK，以及在本地（非分布式）和Google云平台服务中执行数据流的环境。

2016年，Google向Apache软件基金会捐赠了核心SDK以及本地运行程序的实现，以及用于访问Google云平台数据服务的一组IO（数据连接器）。其他公司和社区成员为现有的分布式执行平台提供了运行器，以及新的将Beam Runners与现有数据库、键值存储和消息系统集成的IO。此外，还提出了新的DSL，以支持Beam模型之上的特定领域需求。

 时间线 
版本释放日期 2020-02-04 2020-01-23 2020-01-06 2019-10-07 2019-08-22 2019-08-01 2019-05-22 2019-04-25 2019-02-26 2019-02-01 2018-12-13 2018-10-29 2018-10-03 2018-08-08 2018-06-26 2018-03-20 2018-01-30 2017-12-02 2017-08-23 2017-05-17 2017-03-11 2017-02-02 2016-12-29 2016-10-31 2016-08-08 2016-06-15

 参见 



 参考文献 

Category:用Java編程的自由軟體
Category:Java平台
Category:Hadoop
Category:叢集計算
Category:Apache软件基金会项目
Category:Apache软件基金会
Category:有未审阅翻译的页面