如何扛住1.8亿/秒的双11数据洪峰?阿里流计算技术全揭秘

  1. 云栖社区>
  2. 阿里技术>
  3. 博客>
  4. 正文

如何扛住1.8亿/秒的双11数据洪峰?阿里流计算技术全揭秘

技术小能手 2017-11-21 13:53:56 浏览5868
展开阅读全文

双11刚刚拉下帷幕,激动的心还停留在那一刻:

当秒针刚跨过11号零点的一瞬间,来自线上线下的千万剁手党在第一时间涌入了这场年度大趴——从进入会场到点击详情页,再到下单付款一气呵成。

前台在大家狂欢的同时,后台数据流量也正以突破历史新高的洪峰形式急剧涌入:

支付成功峰值达 25.6 万笔/秒
实时数据处理峰值 4.72亿条/秒

而作为实时数据处理任务中最为重要的集团数据公共层(保障着业务的实时数据、媒体大屏等核心任务),在当天的总数据处理峰值更是创历史新高达1.8亿/秒! 想象下,1秒钟时间内千万人涌入双11会场的同时,依然应对自如。

流计算的产生即来源于数据加工时效性的严苛需求:

由于数据的业务价值会随着时间的流失而迅速降低,因此在数据发生后必须尽快对其进行计算和处理,从而能够通过数据第一时间掌握业务情况。今年双11的流计算也面临着一场实时数









网友评论

登录后评论
0/500
评论
技术小能手
+ 关注
所属团队号: 阿里技术