阿里技术 关注
手机版

大数据计算引擎,为什么阿里坚定地选择 Flink?| 直播预告

  1. 云栖社区>
  2. 阿里技术>
  3. 博客>
  4. 正文

大数据计算引擎,为什么阿里坚定地选择 Flink?| 直播预告

技术小能手 2018-09-12 10:52:24 浏览1208 评论0

摘要: 为什么玛雅人公元前就掌握了斗转星移的规律? 为什么AlphaGo 4比1战胜围棋世界冠军? 为什么城市大脑能有效预测城市运转的规律? 科技文明的每次进步,都离不开计算的力量。随着技术的发展,AI 时代呼之欲出。

为什么玛雅人公元前就掌握了斗转星移的规律?

为什么AlphaGo 4比1战胜围棋世界冠军?

为什么城市大脑能有效预测城市运转的规律?

科技文明的每次进步,都离不开计算的力量。随着技术的发展,AI 时代呼之欲出。这一切,无不对计算提出了更高要求:Faster,smarter,and more accurate。

在时代的大背景下,阿里巴巴如何应对挑战?

9月13日晚,锁定阿里技术直播,对话阿里实时计算大牛,共同探索计算之美。

54da92c7c00e460214f8332805cc92a706a830da

为什么要学习 Flink?

针对大数据的应用场景,在批处理的基础之上,越来越多的企业对流处理有了更多的需求,因为他们的产品对计算的实时性以及多样性有了更高更丰富的要求。但是传统的大数据计算框架并没有能够很好地融合批计算和流计算,因此各个企业都需要将批处理和流处理的任务分开部署,大大增加了运维成本(两套引擎)和开发成本(两套任务作业)。对于企业来说,这种架构很难维护,成本较高。对于学习大数据的同学来说,学习成本较高。在这种情况下,新一代的大数据框架应用而生。

Flink 是一款同时支持流处理和批处理的计算引擎。它针对大数据的分布式计算提供了高效的数据通信及快速容错等机制。此外也提供了很友好的高抽象层的 API 便于用户编写分布式任务。Flink 本身在流处理场景就有着诸多天然的优势,是世界上最先进的流处理引擎,被各大企业广泛的应用。针对批处理场景,阿里巴巴最近对 Flink做了诸多优化使得 Flink 也拥有了世界一流的批处理计算能力。

本期大咖嘉宾是谁?

9f01dff81b109b81d867dc4b02329683d9ed10f3

花名:大沙

大沙,阿里资深技术专家,同时也是 Apache Flink Committer。他是加州大学圣迭戈分校计算机工程博士,于2015年加入阿里巴巴集团,目前就职于阿里巴巴计算平台事业部。在加入阿里之前,曾在 Facebook 开发分布式图关系数据库TAO。
加入阿里之后,大沙一直从事阿里新一代计算平台 Blink 的研发工作。现在负责基于 Blink 的计算平台和算法平台。加入阿里之初,他负责搜索事业部的离线大数据处理,利用半年的时间带领团队将阿里淘宝、天猫搜索离线数据的计算,全部迁移到 Blink 计算平台之上。之后负责 Blink 计算平台的查询和优化。仅用时半年多,就打造了一套功能完备高性能的实时计算 Blink SQL&Table API,并成功地将阿里的实时机器学习计算平台整体地迁移到这套API之上。大沙是 Apache Flink Committer,除了自己,他在团队内部还培养出另外2位 Apache Flink Committer。
哪些直播亮点值得期待?
● 大数据领域当前发展状况,以及趋势如何?
● 随着IOT、人工智能的发展,万物互联时代俨然已来,实时计算随之风生水起,作为下一代大数据计算引擎,火的一塌糊涂的Flink究竟是啥?
● 为什么阿里坚定地选择 Flink?
● 阿里巴巴在流处理和批处理上对Flink都做了哪些优化,Flink 在流处理和批处理上和其他开源计算引擎相比都有哪些优势?
● Flink 在阿里承担了哪些重任,有哪些典型的应用场景?
● 想要参与开源贡献却无处下手,如何快速成为开源项目的 committer?
● 当下最抢手的大数据工程师需要具备哪些特质与技能?

在直播中,这些你感兴趣的问题,都能找到答案!

除了干货内容,更有精彩互动

直播过程中将预留30分钟左右时间,专门解答大家的问题。如果你有更多想听的内容,也欢迎在文章底部留言。

当然,阿里妹还联合 Flink China 社区为大家准备了一大波神秘周边,送给参与直播的你~

经验是不可跨越的,但是我们可以让经验积累的过程变得短些。一切准备就绪,只等君来。9月13日晚,让我们不见不散!

最后,阿里妹再为大家详细介绍本次直播观看形式:

0431bb5a0299060aab32030f225bc9ca7c5e4933

1、使用钉钉App,扫描上方二维码,加入Flink交流群

2、本次直播将通过钉钉群直播形式举行,直播结束后可免费观看、下载视频。

3、钉钉群将永久保留,方便你与志同道合的技术人交流。


原文发布时间为:2018-09-12

本文作者:期待直播的

本文来自云栖社区合作伙伴“阿里技术”,了解相关信息可以关注“阿里技术”。

【云栖快讯】你想见的Java技术专家都在这了,向大佬提问,有问题必答  详情请点击

网友评论

技术小能手
文章7218篇 | 关注1722
关注
快速、完全托管的TB/PB级数据仓库解决方案,向用户提供了完善的数据导入方案以及多种经典的分... 查看详情
用于实时预测用户对物品偏好,支持企业定制推荐算法,支持A/B Test效果对比 查看详情
基于领先的内容接入与分发网络和大规模分布式实时转码技术打造的音视频直播平台,提供便捷接入、高... 查看详情
为您提供简单高效、处理能力可弹性伸缩的计算服务,帮助您快速构建更稳定、安全的应用,提升运维效... 查看详情
阿里云总监课正式启航

阿里云总监课正式启航