必看!Apache Flink 运维&实战系列直播,揭秘生产环境技术难点

本文涉及的产品
实时计算 Flink 版,5000CU*H 3个月
简介: 随着 Flink 社区的快速发展,其技术也逐渐走向成熟。在 2019 年,国内已经有大量的本土互联网公司开始采用 Apache Flink 作为主流的实时计算解决方案。同时,在全球范围内,优步、网飞、微软和亚马逊等国际互联网公司也逐渐开始使用 Apache Flink。

Apache Flink 是公认的新一代开源大数据计算引擎,其流水线运行系统既可以执行批处理程序也可以执行流处理程序。目前,Flink 已成为 Apache 基金会和 GitHub 社区最为活跃的项目之一。

随着 Flink 社区的快速发展,其技术也逐渐走向成熟。在 2019 年,国内已经有大量的本土互联网公司开始采用 Apache Flink 作为主流的实时计算解决方案。同时,在全球范围内,优步、网飞、微软和亚马逊等国际互联网公司也逐渐开始使用 Apache Flink。

为了让大家更方便上手使用 Flink,Flink 中文社区邀请 Apache Flink 核心贡献者与国内外一线大厂线上直播分享 Flink 技术原理解析、应用上手实操、最佳实践应用等,揭秘 Flink 从基础、进阶到运维&实战等详细细节,助力社区开发者从小白成长为技术专家!

直播观看方式:

钉钉扫描下方二维码或搜索:23138101,即可加入Apache Flink社区大群,每周二或周四锁定群直播!

_

3.1 Flink 反压/延时监控和调参控制

【分享嘉宾】Rong Rong(Apache Flink Committer,Software Engineer at Uber)
视频回放

3.2 Metric 指标、监控、报警

【分享嘉宾】孙梦瑶(美团点评 研发工程师)
视频回放

3.3 如何利用 Flink 和深度学习模型实现垃圾图片分类

【分享嘉宾】陈戊超(阿里巴巴 技术专家)
视频回放

3.4 Flink CEP 实战

【分享嘉宾】刘博(哈啰出行 大数据实时平台资深开发)
视频回放
文章整理

3.5 Flink 实时数仓的应用

【分享嘉宾】黄伟伦(美团点评 数据系统研发工程师)
视频回放

3.6 State Processor API 介绍与演示

【分享嘉宾】戴资力(Apache Flink PMC)
视频回放

3.7 Flink 常见问题诊断

【分享嘉宾】杨阳(阿里巴巴 高级运维工程师)
视频回放

3.8 大规模场景的高阶运维

【分享嘉宾】王华(阿里巴巴 运维专家)
视频回放

3.9 Flink 作业问题分析和调优实践

【分享嘉宾】李康(虎牙 实时平台负责人)
视频回放

3.10 Flink 生产配置最佳实践

【分享嘉宾】席建刚(趣头条 实时平台负责人)
视频回放

3.11 基于 Apache Flink 的监控告警系统

【分享嘉宾】zhisheng(《Flink 实战与性能优化》专栏作者)
视频回放

3.12 30分钟教你如何入门 – Apache Flink 最全知识图谱详解

【分享嘉宾】程鹤群(军长)(Apache Flink Committer,阿里巴巴技术专家)
视频回放

3.13 【1.10特别篇】Demo: 基于 Flink SQL 构建离线应用

【分享嘉宾】李劲松(之信)(Apache Flink Committer,阿里巴巴技术专家)
视频回放

3.14 【1.10特别篇】Demo: 基于 Flink SQL 构建实时应用

【分享嘉宾】伍翀(云邪)(Apache Flink PMC,阿里巴巴技术专家)
视频回放

3.15 【1.10特别篇】Flink on Zeppelin: 极致体验(1) 入门 + Batch

【分享嘉宾】章剑锋(Apache Zeppelin PMC,阿里巴巴高级技术专家)
视频回放

3.16 【实时数仓篇】基于 Flink 的典型 ETL 场景实现

【分享嘉宾】买蓉(美团点评 高级技术专家)
视频回放

3.17 【1.10特别篇】Flink on Zeppelin: 极致体验(2) Streaming + 高级用法

【分享嘉宾】章剑锋(Apache Zeppelin PMC,阿里巴巴高级技术专家)
视频回放

3.18 【1.10特别篇】Alink 入门到实践

【分享嘉宾】杨旭(阿里巴巴资深算法专家)
直播:3月5日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.19 【实时数仓篇】利用 Flink 实现实时超时统计场景

【分享嘉宾】马汶园(菜鸟 数据工程师)
直播:3月10日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.20 【实时数仓篇】利用 Flink 实现实时状态复用场景

【分享嘉宾】李晨(菜鸟 数据工程师)
直播:3月12日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.21 【1.10特别篇】PyFlink 架构、应用案例及未来规划

【分享嘉宾】孙金城(Apache Flink PMC,Apache Beam Committer,阿里巴巴高级技术专家)
直播:3月17日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.22 【实时数仓篇】Flink CEP 及 应用场景

【分享嘉宾】薛康(滴滴 资深研发工程师)
直播:3月19日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.23 【实时数仓篇】Flink 窗口函数的应用场景

【分享嘉宾】张俊(Apache Flink Contributor,OPPO大数据平台研发负责人)
直播:3月26日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.24 【1.10特别篇】细粒度资源管理

【分享嘉宾】宋辛童(Apache Flink Contributor,阿里巴巴高级开发工程师)
直播:3月31日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.25 【1.10特别篇】native on Kubernetes

【分享嘉宾】王阳(阿里巴巴实时计算引擎团队研发专家)
直播:4月2日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

3.26 【直播主题】PyFlink 最新功能介绍

【分享嘉宾】程鹤群(军长)(Apache Flink Committer,阿里巴巴技术专家)
直播:4月16日 20:00-21:00 (UTC+8)
备注:视频、PPT待直播后更新

相关实践学习
基于Hologres轻松玩转一站式实时仓库
本场景介绍如何利用阿里云MaxCompute、实时计算Flink和交互式分析服务Hologres开发离线、实时数据融合分析的数据大屏应用。
Linux入门到精通
本套课程是从入门开始的Linux学习课程,适合初学者阅读。由浅入深案例丰富,通俗易懂。主要涉及基础的系统操作以及工作中常用的各种服务软件的应用、部署和优化。即使是零基础的学员,只要能够坚持把所有章节都学完,也一定会受益匪浅。
相关文章
|
1月前
|
运维 监控
现代运维中的自动化技术应用与挑战
现代运维工作中,自动化技术的应用已成为提高效率、降低成本的重要手段。本文探讨了自动化技术在运维领域的应用现状和挑战,包括自动化工具的选择、实施过程中的注意事项以及未来发展趋势。通过深入分析,帮助读者更好地理解和应用自动化技术,提升运维工作效率。
18 2
|
2月前
|
人工智能 运维 监控
现代化运维系统的关键技术与挑战
随着信息技术的快速发展,现代化运维系统成为企业管理的重要组成部分。本文将探讨现代化运维系统中的关键技术和面临的挑战,从自动化运维、容器化技术到监控与安全性等方面展开讨论,帮助读者更好地理解和应对运维领域的挑战。
|
2月前
|
运维 安全 数据安全/隐私保护
课1-数据可信流通,从运维信任到技术信任
构建数据可信流通体系,关键在于建立技术信任。该体系基于信任四要素:身份确认、利益依赖、能力预期及行为后果。数据内循环时,持有方负责数据安全;外循环则面临责任主体不清等问题。为实现可信流通,需由运维信任转向技术信任,依托密码学和可信计算技术,并遵循数据二十条政策。技术手段包括可信应用身份、使用权跨域管控、安全分级标准和全链路审计,确保内外循环的数据管控。基础设施——密态天空计算,支持以隐私计算为核心的密态数联网,实现责任界定的全链路数据安全。
|
2月前
|
机器学习/深度学习 人工智能 运维
《未来智能运维:AI技术的应用与展望》
在当今数字化时代,智能运维正日益成为企业提升效率、降低成本的关键。本文将探讨人工智能技术在运维领域的应用现状与未来发展趋势,展望未来智能运维的发展前景。
163 1
|
16天前
|
传感器 存储 缓存
[尚硅谷flink学习笔记] 实战案例TopN 问题
这段内容是关于如何使用Apache Flink解决实时统计水位传感器数据中,在一定时间窗口内出现次数最多的水位问题,即"Top N"问题。首先,介绍了一个使用滑动窗口的简单实现,通过收集传感器数据,按照水位计数,然后排序并输出前两名。接着,提出了全窗口和优化方案,其中优化包括按键分区(按水位vc分组)、开窗操作(增量聚合计算count)和过程函数处理(聚合并排序输出Top N结果)。最后,给出了一个使用`KeyedProcessFunction`进行优化的示例代码,通过按键by窗口结束时间,确保每个窗口的所有数据到达后再进行处理,提高了效率。
|
2月前
|
人工智能 运维 监控
未来数据中心的自动化运维技术探索
随着信息技术的快速发展,未来数据中心的运维需求将变得更加复杂而多样化。本文将探讨自动化运维技术在未来数据中心中的应用,分析其优势和挑战,并探讨如何实现高效的自动化运维管理。
|
2月前
|
运维 监控 Cloud Native
现代化运维管理系统的关键技术与应用
随着信息技术的不断进步,现代企业对运维管理系统的需求日益增长。本文将重点探讨现代化运维管理系统所涉及的关键技术,包括自动化运维、云原生架构、容器化技术等,并分析这些技术在实际应用中的优势和挑战。
|
2月前
|
机器学习/深度学习 人工智能 运维
现代化运维管理技术的发展与挑战
随着信息技术的迅猛发展,现代化运维管理技术已经成为企业发展中不可或缺的重要组成部分。本文将探讨现代化运维管理技术的最新发展趋势,以及在实践中所面临的挑战和解决方案。
|
2月前
|
运维 安全 区块链
隐私计算训练营第一讲 :数据可信流通,从运维信任到技术信任
构建数据可信流通体系旨在解决数据流转中的安全和信任问题,确保来源可确认、使用范围界定、过程可追溯及风险可控。体系基于身份验证、利益对齐、预期能力和行为审计的技术要求,采用可信计算、区块链、隐私计算等技术,打造从原始到衍生数据的全程可信环境。密态计算技术成为关键,推动数据密态时代的到来,其中密态天空计算是重要的基础设施。
37 0
|
2月前
|
机器学习/深度学习 运维 安全
# 隐私计算实训营note#1 数据可信流通,从运维信任到技术信任
### 笔者前言&摘要 这一讲的主要内容是从宏观的层面介绍隐私/可信计算的基本概念,技术愿景和实用价值。这部分内容是理解隐私查询(PIR)、隐私机器学习(PPML)和其他的多方安全计算(MPC)技术的远大技术愿景和实际应用价值的基础。视频链接:[第1讲:数据可信流通,从运维信任到技术信任](https://www.bilibili.com/video/BV1sJ4m187vR/)。

相关产品

  • 实时计算 Flink版
  • 推荐镜像

    更多