1. 聚能聊>
  2. 话题详情

今天咱们严肃活泼的聊聊下一代大数据计算引擎

权威解读:阿里云实时计算究竟对Apache Flink做了哪些‘改造’?

_
阿里云实时计算是一套基于Apache Flink™️构建的一站式全托管实时大数据处理平台。11月14日下午3点,实时计算团队的资深专家,和我们权威解读阿里眼中下一代大数据计算引擎的前世今生,聊聊阿里实时计算的那些事儿!

权威解读

实时计算团队将于11月14日举办实时计算产品线上发布会,届时重磅发布实时计算独享模式,资深技术专家和高级产品专家将共同分享阿里眼中的下一代大数据计算引擎。

演讲主题:《阿里巴巴对Apache Flink的改进和贡献》

_
王峰(莫问)
阿里巴巴资深技术专家
2006年毕业后即加入阿里集团,长期从事大数据技术研发工作,目前在计算平台事业部担任资深技术专家,负责实时计算引擎团队,旨在打造世界一流的实时计算平台。对Apache Flink™️进行了大量架构改进,功能完善和性能提升,打造出了阿里新一代实时计算引擎,并统一服务阿里集团所有实时计算业务和实时计算云产品。

演讲主题:《阿里云实时计算:下一代大数据计算引擎》

_
陈守元(巴真)
阿里巴巴高级产品专家
阿里巴巴实时计算团队产品负责人,2010年毕业即加入阿里集团参与淘宝数据平台建设,近10年的大数据从业经验,开源项目Alibaba DataX发起人,当前负责阿里实时计算产品的规划与设计,致力于推动Apache Flink™️成为下一代大数据处理标准。

客户说

_
阿里云实时计算今年4月份正式商业化之后,截止目前,使用用户已经超过2000家。在已有的用户中,实时计算主要应用于实时互联网数据分析、实时数据大屏、实时金融风控、电商实时推荐等诸多领域。阿里集团内淘宝、天猫、天弘基金、菜鸟、工业大脑等诸多业务均大量应用了实时计算技术,在集团外,也包括众安保险、全民TV、新华智云、贵州茅台等诸多公司的应用案例。

阿里影业:影业实时报表开始做法也是按照传统型报表做法一样,直接从阿里云rds写sql查询,随着数据量越来越大,这种做法已经没有办法满足业务扩张,带来的问题响应时间变慢,吞吐量低,我们急需要一种技术方案能满足未来2-3年随着影院增加,数据增长,而报表功能还能很好的满足客户需求技术方案。后面接触到实时计算,得以很好解决这一业务难题。
淘宝:随着淘宝内容化的深入发展,实时选品的需求越来越强烈。对于某些实时性要求较高的产品(SPU)而言,运营小二希望自己圈定产品池可以当天实时生效,以供创作者写文章使用。该需求对选品的实时性要求较高,比较适合流式计算的特点。因此,采用实时流计算技术来实现该功能,实际应用中取得较好效果。
袋鼠云:贵州茅台,中国知名品牌,销售渠道广泛,获得巨大成功的同时,也有一些非常严重的问题,比如:黄牛刷单现象严重、数据采集实时性、稳定性差、各渠道下的流量、交易及售后物流、服务、退款退货等环节分析困难、异常预警信息监控困难等,袋鼠云基于实时计算 Flink开发了茅台企业大脑,很好的解决了上面的问题。

实时计算 产品试用
线上直播地址

话题

1.你了解 流计算/实时计算 主要解决哪些业务场景下的问题吗?
2.你体验过实时计算/Flink吗, 解决了哪些业务问题?
3.你认为Flink要成为下一代大数据计算引擎,要解决哪些问题?
4.关于实时计算/Flink,你有什么问题想了解的?(问题被选中,即可有礼品哦)

我们准备50件礼品给参与上述问答的同学(勿水贴,认真填写均能取得我们的小礼物哦),欢迎对实时计算/Flink感兴趣的大数据爱好者们届时观看活动直播,与我们的嘉宾进行线上互动!
_

参与话题

奖品区域 活动规则 已 结束

  • 奖品一

    福禄寿淘公仔 x 1

  • 奖品二

    阿里云纪念T恤 x 1

62个回答

0

手撕 复制链接去分享

实时对流的话应该更精准更明确!

0

1333319599058428 复制链接去分享

强烈关注中!

0

1162342190989386 复制链接去分享

厉害

0

1205041404958103 复制链接去分享

感觉十分厉害一样,值得试试

0

1907601934484366 复制链接去分享

不错

0

1708611439368583 复制链接去分享

学习一下

0

荒凉一梦 复制链接去分享

没搞明白这是要干啥,不明觉厉

0

1423142113220150 复制链接去分享

太好啦

0

图拉丁8 复制链接去分享

1.流计算适用于,区间时间内的指标检测或数据清洗
2.了解过storm/spark 不了解flink
3.与其他组件的衔接,还有丰富的外部应用

0

icecode430 复制链接去分享

学习一下,蹭个礼物

0

阿水哥 复制链接去分享

没搞明白这是要干啥,不明觉厉

0

溪云zero 复制链接去分享

一直有个梦想,能获得阿里的T恤~

0

dineng521 复制链接去分享

活动还是很给力

0

微wx笑 复制链接去分享

这个应该去认真学习一下。

0

stephenz 复制链接去分享

Blink是一个非常棒的产品,从越来越多的用户可见一斑。但是我也想要提出一些诚恳的建议:

  1. 希望有标准用户和高级用户之分。一些比较高级的开发者还是希望能操作更低层一些的东西,比如state。我可能想手动管理state。
  2. 能开放源码。开源既能让用户更了解阿里的产品,又能促进代码的进步。

其实说这两点,我就是想要奖励而已hhhh

0

1123639721489608 复制链接去分享

期待这样的计算引擎,厉害了

0

hello-one 复制链接去分享

比较关心:
1.流join 和维表join(mysql,hbase,cache) 的相关demo
2.batch 什么时候贡献到社区
3.flink 有可能替代spark-sql 对hive 的计算优化吗?

0

竹知无 复制链接去分享

哇,据说有奖品,blink牛逼

0

cellen 复制链接去分享

希望多一些关于借助于flink进行项目二次开发的学习资料,比如,如何在现有的项目中,少改变现有产品或项目的代码的基础上,把一些流计算顺利迁移到FLINK集群中,而不是把所有代码重构,这样代价太大了,

0

1792616265623372 复制链接去分享

还不错

4