2016美国QCon看法:在Beam上,我为什么说Google有统一流式计算的野心

  1. 云栖社区>
  2. 阿里云数据库ApsaraDB>
  3. 博客>
  4. 正文

2016美国QCon看法:在Beam上,我为什么说Google有统一流式计算的野心

猫头鹰子嘉 2016-11-22 18:50:37 浏览5848
展开阅读全文

编者按:流式计算(Stream Processing)在经历了若干年的发展之后,已经有了比较完整的生态,如开源的Storm, Flink, Spark等,未开源的如Google的DataFlow,几乎每个巨头都有自己的流式计算系统。生态虽繁荣但分散,各个平台之间也是互不兼容的,一个平台上写的程序很难移植到另外一个平台,这些领域难题再加上Google大一统流式计算的野心催生了Apache孵化器的新项目Beam。

 

         Google是最早实践大数据的公司,目前大数据繁荣的生态很大一部分都要归功于Google最早的几篇论文,这几篇论文早就了以Hadoop为开端的整个开源大数据生态,但是很可惜的是Google内部的这些系统是无法开源的,在开源生态和云计算兴起之后,Google也是受够了闭源的痛苦,据说为了给用户提供HBase服

网友评论

登录后评论
0/500
评论
猫头鹰子嘉
+ 关注
所属云栖号: 阿里云数据库ApsaraDB