Flink在唯品会的实践

  1. 云栖社区>
  2. 博客>
  3. 正文

Flink在唯品会的实践

赵慧 2018-10-15 11:13:33 浏览2555
展开阅读全文
本文来自于王新春在2018年7月29日 Flink China社区线下 Meetup·上海站的分享。王新春目前在唯品会负责实时平台相关内容,主要包括实时计算框架和提供实时基础数据,以及机器学习平台的工作。之前在美团点评,也是负责大数据平台工作。他已经在大数据实时处理方向积累了丰富的工作经验。

本文主要内容主要包括以下几个方面:

  1. 唯品会实时平台现状
  2. Flink在唯品会的实践
  3. Flink On K8S
  4. 后续规划

一、唯品会实时平台现状

目前在唯品会实时平台并不是一个统一的计算框架,而是包括 Storm,Spark,Flink 在内的三个主要计算框架。由于历史原因,当前在 Storm 平台上的 job 数量是最多的,但是从去年开始,业务重心逐渐切换到 Flink 上面,所以今年在 Flink 上面的应用数量有了大幅增加。

实时平台的核心业务包含八大部

网友评论

登录后评论
0/500
评论
赵慧
+ 关注