+ 关注 提问 已有2人关注此标签
作者: 阿里云实时计算Flink 323人浏览
本文首先介绍为何要参与开源社区以及在参与开源社区的过程中需要注意什么,然后重点介绍如何参与 Flink 社区以及在社区里面提交 PR 的整个流程。
大数据 Apache 模块 数据处理 测试 git Commit github 流计算 flink 实时计算
作者: 阿里云实时计算Flink 361人浏览
本文第一部分将简明扼要地介绍容器管理系统的演变;第二部分是 Flink on K8S 简介,包括集群的部署模式调度原理等等;第三部分是我们这一年以来关于 Flink on K8S 的实战经验分享,介绍我们遇到的问题、踩过的坑;最后一部分是 Demo,将手把手演示集群部署、任务提交等等。
大数据 性能 日志 数据处理 配置 集群 云服务 流计算 k8s flink 实时计算
作者: 阿里云实时计算Flink 473人浏览
本文根据 Apache Flink 系列直播整理而成,由 Apache Flink Contributor、OPPO 大数据平台研发负责人张俊老师分享。主要内容如下: 1. 整体思路与学习路径 2. 应用场景与编程模型 3. 工作流程与实现机制
大数据 架构 函数 数据处理 编程 存储 流计算 flink 实时计算 实时数仓
作者: 阿里云实时计算Flink 771人浏览
6月14日,阿里巴巴计算平台事业部与阿里云开发者社区共同举办的大数据+AI Meetup 系列第一季即将重磅开启,此次 Meetup 邀请了来自阿里巴巴、Databricks、快手、网易云音乐的7位技术专家,集中解读大数据当前热门话题!
大数据 算法 Apache 数据处理 数据仓库 spark AI 流计算 flink 实时计算
作者: 阿里云实时计算Flink 802人浏览
本文将从大数据架构变迁历史,Pravega 简介,Pravega 进阶特性以及车联网使用场景这四个方面介绍 Pravega,重点介绍 DellEMC 为何要研发 Pravega,Pravega 解决了大数据处理平台的哪些痛点以及与 Flink 结合会碰撞出怎样的火花。
大数据 架构 消息队列 数据处理 集群 弹性伸缩 序列 stream 存储 数据存储 流计算 flink 实时计算
作者: 阿里云实时计算Flink 491人浏览
本期主要内容包括:近期社区开发进展、邮件问题答疑、Flink 最新社区动态及技术文章推荐等。
大数据 Apache 数据处理 集群 测试 runtime html 流计算 flink 实时计算
作者: 阿里云实时计算Flink 688人浏览
Flink 1.11 版本即将正式宣告发布!为满足大家的好奇与期待,我们邀请 Flink 核心开发者对 1.11 版本的功能特性进行解读与分享。Flink 1.11 在 1.10 的基础上对许多方面进行了完善和改进,并致力于进一步提高 Flink 的可用性及性能。
python 大数据 日志 Apache 数据处理 配置 pandas UDF source 流计算 flink 实时计算
作者: 阿里云实时计算Flink 505人浏览
Flink 1.10 与 1.9 相比又是个创新版本,在我们感兴趣的很多方面都有改进,特别是 Flink SQL。本文用根据埋点日志计算 PV、UV 的简单示例来体验 Flink 1.10 的两个重要新特性.
大数据 函数 SQL Apache 数据处理 scala string Hive schema 流计算 flink 实时计算
作者: 阿里云实时计算Flink 606人浏览
5月16日,2020 年首场 Apache Flink Meetup · 杭州站在线直播圆满结束。本次 Meetup 邀请了来自袋鼠云、网易云音乐、有赞及阿里巴巴的四位技术专家分享关于实时数仓、1.10 生产环境实践、Flink 分布式同步工具以及 Flink 在 AI 流程中的应用。
分布式 大数据 SQL Apache 数据处理 袋鼠云 流计算 flink 实时计算
作者: 阿里云实时计算Flink 658人浏览
为 Flink 1.11 热身,然后回溯 Flink 社区的四月份——发布了 Statful Functions 2.0、一个新的自定进度的 Flink 培训以及一些旨在改善 Flink 文档体验的工作。
python 大数据 Apache 内存管理 API html Gmail 培训 流计算 flink 实时计算
作者: 阿里云实时计算Flink 641人浏览
本文由阿里技术专家陈戊超(仲卓)分享。深度学习技术在当代社会发挥的作用越来越大。目前深度学习被广泛应用于个性化推荐、商品搜索、人脸识别、机器翻译、自动驾驶等多个领域,此外还在向社会各个领域迅速渗透。
深度学习 分布式 大数据 数据处理 集群 node source 流计算 TensorFlow flink 实时计算 ML
作者: 阿里云实时计算Flink 335人浏览
大家好,本文为 Flink Weekly 的第十五期,由张成整理,李本超 Review。本期主要内容包括:近期社区开发进展、邮件问题答疑、Flink 最新社区动态及技术文章推荐等。
大数据 Apache 数据处理 html 流计算 flink 实时计算
作者: 阿里云实时计算Flink 434人浏览
在上篇文章中,笔者使用的 CDH 版本为 5.16.2,其中 Hive 版本为 1.1.0(CDH 5.x 系列 Hive 版本都不高于 1.1.0,是不是不可理解),Flink 源代码本身对 Hive 1.1.0 版本兼容性不好,存在不少问题。
大数据 SQL Apache 数据处理 数据库 配置 spark string Hive type 存储 流计算 flink 实时计算
作者: 阿里云实时计算Flink 328人浏览
对于作业规模不大的普通用户而言,这些通常在可以接受的范围之内,但对于上千并行度的大作业来说,浪费资源的总量会非常可观,而且进程的不稳定性导致的作业恢复时间也会比普通作业长得多,因此阿里巴巴的 Blink 团队针对内存管理机制做了大量的优化,并于近期开始合并到 Flink。
大数据 线程 数据处理 配置 内存管理 流计算 实时计算
作者: 阿里云实时计算Flink 923人浏览
每个人的时间都是有限的,在有限的时间里选择一项值得投入的技术会变得尤为重要。
大数据 hadoop Apache 数据处理 spark Mapreduce 流计算 海量数据 flink 实时计算
作者: 阿里云实时计算Flink 836人浏览
如果你对以上问题深有同感,那说明这篇文章很适合你。我们来看看如何真正解决这个问题。接下来我将带各位了解下 Flink 与 Hive 生产级别的整合工作。
大数据 函数 数据处理 基础设施 数据仓库 数据分析 Hive 分区表 数据类型 数据存储 流计算 数据管理 flink 实时计算
作者: 阿里云实时计算Flink 1001人浏览
面试,一个令人大多数同学头疼的问题,要么成功进入心仪公司,要么沮丧与其失之交臂。但是,如果能在面试前就能知道面试官将会问的问题,然后可以好好提前准备,这种感觉是不是特别棒?
大数据 数据处理 流计算 招聘 flink 实时计算 知识图谱
作者: 阿里云实时计算Flink 465人浏览
大家好,本文为 Flink Weekly 的第十四期,由李本超整理,伍翀 Review。本期主要内容包括:近期社区开发进展、邮件问题答疑、Flink 最新社区动态及技术文章推荐等。
作者: 阿里云实时计算Flink 522人浏览
Flink 社区将分享“走进 ASF”系列内容,先从宏观介绍 ASF 是如何运作的,然后详细解说如何参与 Apache 具体项目做贡献,如何成为某个项目的 Committer、PMC 成员,如何选择多个 Apache 项目进行多领域贡献并成为 ASF Member 等,希望有助于你真正了解开源、参与开源。
大数据 Apache 数据处理 流计算 flink 实时计算