Ververica + 关注
Apache Flink 社区运营账号

如果你也想做实时数仓…

发布时间:2019-09-09 16:13:29 浏览:1072 评论 :0

数据仓库也是公司数据发展到一定规模后必然会提供的一种基础服务,数据仓库的建设也是“数据智能”中必不可少的一环。本文将从数据仓库的简介、经历了怎样的发展、如何建设、架构演变、应用案例以及实时数仓与离线数仓的对比六个方面全面分享关于数仓的详细内容。

大数据 架构 消息队列 数据处理 数据仓库 实时计算 ApacheFlink 实时数仓

小红书如何实现高效推荐?解密背后的大数据计算平台架构

发布时间:2019-08-05 17:43:27 浏览:1325 评论 :0

小红书作为生活分享类社区,目前有8500万用户,年同比增长为300%,大约每天有30亿条笔记在发现首页进行展示。推荐是小红书非常核心且重要的场景之一,本文主要分享在推荐业务场景中小红书的实时计算应用。

大数据 平台架构 Image Hive schema 报表 session 流计算 推荐系统

58 集团大规模 Storm 任务平滑迁移至 Flink 的秘密

发布时间:2019-08-05 17:35:41 浏览:535 评论 :0

本文主要讲述 58 实时计算平台如何优化 Flink-Storm 以及基于 Flink-Storm 实现真实场景下大规模 Storm 任务平滑迁移 Flink。

大数据 storm 模块 数据处理 配置 集群 Image 实时计算 Apache_Flink 58 Flink-storm

Apache Flink 零基础入门教程(六):状态管理及容错机制

发布时间:2019-08-05 17:21:39 浏览:551 评论 :0

本文主要分享内容如下: - 状态管理的基本概念; - 状态的类型与使用示例; - 容错机制与故障恢复;

大数据 Apache 数据处理 API 数据结构 存储 流计算 实时计算 入门教程 Apache_Flink

Apache Flink 零基础入门(五):流处理核心组件 Time&Window 深度解析

发布时间:2019-08-05 17:15:17 浏览:433 评论 :0

为什么要有 Window; Window 中的三个核心组件:WindowAssigner、Trigger 和 Evictor;Window 中怎么处理乱序数据,乱序数据是否允许延迟,以及怎么处理迟到的数据;最后我们梳理了整个 Window 的数据流程,以及 Window 中怎么保证 Exactly .

大数据 数据处理 存储 流计算 实时计算 入门教程 Apache_Flink

即将发版!Apache Flink 1.9 版本有哪些新特性?

发布时间:2019-08-02 16:53:02 浏览:13202 评论 :0

文整理自开源大数据专场中阿里巴巴高级技术专家杨克特(鲁尼)先生的精彩演讲,主要讲解了Apache Flink过去和现在的发展情况,同时分享了对Apache Flink未来发展方向的理解。

大数据 SQL Apache Image runtime API Hive 流计算 Blink 实时计算 ApacheFlink Flink1.9.0

继续南山聊代码!Apache Kafka × Apache Flink Meetup · 深圳站

发布时间:2019-08-01 01:45:16 浏览:811 评论 :0

8 月 31 日,Apache Flink Meetup 深圳站来啦,继续南山聊代码!本次 Meetup 由 Apache Flink(以下简称 Flink)与 Apache Kafka 联合举办,邀请到来自 Confluent 、中国农业银行 、虎牙直播、数见科技以及阿里巴巴等五位技术专家为大家呈现 Kafka 与 Flink 的技术盛宴。

大数据 架构 引擎技术 SQL Apache 消息中间件 Image 流计算 kafka 大数据分析 推荐系统 实时计算 ApacheFlink

Apache Flink 1.9.0 为什么将支持 Python API ?

发布时间:2019-08-01 01:30:45 浏览:1480 评论 :0

众所周知,Apache Flink(以下简称 Flink)的 Runtime 是用 Java 编写的,而即将发布的 Apache Flink 1.9.0 版本则会开启新的 ML 接口和新的 flink-python 模块,Flink 为什么要增加对 Python 的支持,想必大家一定好奇。

大数据 hadoop Apache 互联网 人工智能 Image API google Mapreduce 流处理 实时计算 数据计算 ApacheFlink AI及大数据

独家专访阿里集团副总裁贾扬清:我为什么选择加入阿里巴巴?

发布时间:2019-07-29 11:32:19 浏览:11108 评论 :0

在这次访谈中,贾扬清向我们透露了他加入阿里的原因,并对他目前在阿里主要负责的工作做了详细说明,他不仅回顾了过去 6 年 AI 框架领域发生的变化,也分享了自己对于 AI 领域现状的观察和对未来发展的思考。

深度学习 大数据 算法 人工智能 流计算 实时计算 ApacheFlink AI及大数据

首届!Apache Flink 极客挑战赛强势来袭,重磅奖项等你拿,快来组队报名啦

发布时间:2019-07-24 17:51:26 浏览:1161 评论 :0

7 月 24 日,阿里云峰会上海开发者大会开源大数据专场,阿里巴巴集团副总裁、计算平台事业部总裁贾扬清与英特尔高级首席工程师、大数据分析和人工智能创新院院长戴金权共同发布首届 Apache Flink 极客挑战赛。欢迎报名参赛!

深度学习 大数据 性能优化 机器学习 性能 Apache 钉钉 开源大数据 流计算 大数据分析 ApacheFlink AI及大数据 实时技术

Flink 1.8.0中的状态生存时间特性:如何自动清理应用程序的状态

发布时间:2019-07-18 21:11:30 浏览:475 评论 :0

在本文中,我们将讨论引入状态生存时间特性的动机并讨论其相关用例。此外,我们还将演示如何使用和配置该特性。同时,我们将会解释Flink如何借用状态生存时间特性在内部管理状态,并对Flink 1.8.0中该功能引入的相关新特性进行一些展示。本文章最后对未来的改进和扩展作了展望。

Apache 数据处理 配置 存储 流计算 TTL 实时计算 Apache_Flink AI及大数据 State

日均处理万亿数据!Flink在快手的应用实践与技术演进之路

发布时间:2019-07-17 14:26:09 浏览:5613 评论 :0

本次的分享包括以下三个部分: 1. 介绍 Flink 在快手的应用场景以及目前规模; 2. 介绍 Flink 在落地过程的技术演进过程; 3. 讨论 Flink 在快手的未来计划。

大数据 数据处理 集群 source 磁盘 存储 流计算 实时计算 快手 应用案例 Apache_Flink

Apache Flink 零基础入门(四):客户端操作的 5 种模式

发布时间:2019-07-17 14:05:13 浏览:755 评论 :0

本文主要分享 Flink 的 5 种任务提交的方式。熟练掌握各种任务提交方式,有利于提高我们日常的开发和运维效率。

java hadoop SQL Apache 数据处理 cluster large runtime scala input 流计算 实时计算 Apache_Flink AI及大数据 客户端操作

Apache Flink 零基础入门(三):DataStream API 编程

发布时间:2019-07-17 13:58:56 浏览:687 评论 :0

本次课程将首先介绍 Flink 开发中比较核心的 DataStream API 。我们首先将回顾分布式流处理的一些基本概念,这些概念对于理解实际的 DataStream API 有非常大的作用。然后,我们将详细介绍 DataStream API 的设计,最后我们将通过一个例子来演示 DataStream API 的使用。

Apache 数据处理 API string 编程 hashmap 流计算 实时计算 Apache_Flink AI及大数据

Apache Flink 零基础入门(二):开发环境搭建和应用的配置、部署及运行

发布时间:2019-07-12 16:56:44 浏览:1106 评论 :0

本文主要面向于初次接触 Flink、或者对 Flink 有了解但是没有实际操作过的同学。希望帮助大家更顺利地上手使用 Flink,并着手相关开发调试工作。 课程内容包括: - Flink 开发环境的部署和配置 - 运行 Flink 应用(包括:单机 Standalone 模式、多机 S.

hdfs Apache 数据处理 配置 集群 开发环境 zookeeper 流计算 实时计算 apache_flink;

福利 | Flink Forward Asia 2019 由你决定,填问卷,送周边!

发布时间:2019-07-10 21:16:29 浏览:638 评论 :0

为进一步提高会议质量,让 Apache Flink 社区与开发者更近距离地接触,我们诚挚地邀请您参与会前调研,**想听什么议题,想见哪位大佬,想要什么礼品,由你决定!并奉上福利活动~

大数据 Apache 数据处理 流计算 实时计算 Apache_Flink

回顾 | 阿里云实时计算专场 · 北京站

发布时间:2019-07-04 17:49:25 浏览:1074 评论 :0

6 月 30 日,阿里云实时计算专场北京站,由来自格灵深瞳的大数据总监与阿里巴巴产品专家、技术专家一起与大家探讨实时计算的应用实践与场景化解决方案。本文为沙龙现场回顾,含现场PPT下载链接。

大数据 架构 SQL 数据处理 高可用 流式计算 解决方案 流计算 人脸识别 沙龙 实时计算 Apache_Flink

回顾 | Apache Flink 1.9 版本新特性强势预告!(内含PPT下载链接)

发布时间:2019-07-03 14:40:10 浏览:1108 评论 :0

6月29日,Apache Flink Meetup 北京站圆满落幕,Apache Flink 1.9 版本是自 Flink 1.0 之后变化最大的版本,社区对 Flink 进行大量重构并且加入了很多新 Feature。此次 Meetup 重点解读 Flink 1.9 版本新特性。

大数据 架构 Apache runtime API Hive 高性能 兼容性 流计算 实时计算 AI及大数据

Apache Flink 零基础入门(一):基础概念解析

发布时间:2019-07-02 21:14:24 浏览:1194 评论 :1

本文是根据 Apache Flink 基础篇系列直播整理而成,由 Apache Flink PMC 戴资力与阿里巴巴高级产品专家陈守元共同分享。Apache Flink 系列入门教程每周更新一期,持续推送。

Apache 数据处理 数据流 流计算 AI及大数据 Apache_Fink

3