1. 云栖社区>
  2. 全部标签>
  3. #平台架构#
平台架构

#平台架构#

已有0人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

首发|《Apache Flink 年度最佳实践》,揭秘一线大厂实时平台构建实践

甄选 Apache Flink 及大数据领域顶级盛会 Flink Forward Asia 大会嘉宾精彩分享,覆盖国内外一线大厂实时平台构建的经验分享与实时数仓的应用实践,为你揭秘实时计算平台从无到有到有、持续优化的详细细节!

大数据 最佳实践 Apache 数据处理 平台架构 数据分析 aliyun 流计算 海量数据 flink 实时计算 多维分析 流批一体

小米流式平台架构演进与实践

小米业务线众多,从信息流,电商,广告到金融等覆盖了众多领域,小米流式平台为小米集团各业务提供一体化的流式数据解决方案,主要包括数据采集,数据集成和流式计算三个模块。目前每天数据量达到 1.2 万亿条,实时同步任务 1.5 万,实时计算的数据 1 万亿条。

大数据 架构 监控 消息队列 SQL 模块 数据处理 配置 平台架构 spark 流式计算 流计算 flink 实时计算 实时数仓

美团点评基于 Flink 的实时数仓平台实践

数据仓库的建设是“数据智能”必不可少的一环,也是大规模数据应用中必然面临的挑战,而 Flink 实时数仓在数据链路中扮演着极为重要的角色。本文中,美团点评高级技术专家鲁昊为大家分享了美团点评基于 Apache Flink 的实时数仓平台实践。

大数据 日志 数据处理 平台架构 OLAP UDF 存储 流计算 flink 实时计算

大数据平台架构设计探究

本文介绍了一些数据平台设计思路来帮助业务减少数据开发中的痛点和难点。

大数据 架构 模块 数据仓库 平台架构 离线计算 数据采集 oschina 架构设计 lambda架构 实时计算

Lyft 基于 Flink 的大规模准实时数据分析平台(附FFA大会视频)

如何基于 Flink 搭建大规模准实时数据分析平台?在 Flink Forward Asia 2019 上,来自 Lyft 公司实时数据平台的徐赢博士和计算数据平台的高立博士分享了 Lyft 基于 Apache Flink 的大规模准实时数据分析平台。

大数据 架构 etl 性能 数据流 平台架构 数据分析 schema 存储 流计算 flink 实时计算 流数据

高德APP全链路源码依赖分析工程

随着高德地图技术团队的扩张和业务的复杂化,越来越碎片化的代码以及代码之间复杂的依赖关系带来诸多维护性问题

架构 native c++ 模块 源码 js 平台架构 API 表达式 回归测试

开放应用模型(OAM):全球首个云原生应用标准定义与架构模型

作者: OAM 项目负责人 导读:2019 年 10 月 17 日,阿里巴巴合伙人、阿里云智能基础产品事业部总经理蒋江伟(花名:小邪)在 Qcon 上海重磅宣布,阿里云与微软联合推出开放应用模型 Open Application Model (OAM)开源项目。

架构 基础设施 配置 平台架构 open 应用管理 云原生

趣头条基于 Flink 的实时平台建设实践

本文由趣头条实时平台负责人席建刚分享趣头条实时平台的建设,整理者叶里君。文章将从平台的架构、Flink 现状,Flink 应用以及未来计划四部分分享。

大数据 架构 SQL 数据流 配置 集群 平台架构 Server 流计算 TensorFlow 实时计算 ApacheFlink 实时平台

重磅发布 | 全球首个云原生应用标准定义与架构模型 OAM 正式开源

导读:2019 年 10 月 17 日,阿里巴巴合伙人、阿里云智能基础产品事业部总经理蒋江伟(花名:小邪)在 Qcon 上海重磅宣布,阿里云与微软联合推出开放应用模型 Open Application Model (OAM)开源项目。

云栖社区 架构 基础设施 配置 平台架构 open 应用管理

云计算给大数据分析工具带来了什么

如果大数据是一块蛋糕,那么大数据分析工具就是切蛋糕的刀叉。人们都期待着能用“刀叉”从大数据中挖出自己想要的“价值”,因此大数据分析工具被人们寄予厚望。而云计算技术的兴起似乎又给大数据注入了新的推进剂,那么大数据和云计算的结合又会发生怎样的化学反应?对大数据分析工具的发展又有怎样的影响? 大数据的机遇or挑战大数据与传统的海量数据不同的是,它除了数据规模呈现几何级数增长的特征之外,还包括所有数据类型的整合、处理、分析和展现等多个方面,从而最终实现从大数据挖掘潜在巨大价值的目的。

大数据 架构 性能 平台架构 负载均衡 云数据库 分布式计算 并行计算 云平台 分布式系统 存储 数据类型 大数据分析 海量数据

重磅发布 | 全球首个云原生应用标准定义与架构模型 OAM 正式开源

2019 年 10 月 17 日,阿里巴巴合伙人、阿里云智能基础产品事业部总经理蒋江伟(花名:小邪)在 Qcon 上海重磅宣布,阿里云与微软联合推出开放应用模型 Open Application Model (OAM)开源项目。

架构 基础设施 配置 平台架构 open 应用管理

回顾 | Apache Flink Meetup ·上海站(附PPT下载链接)

9 月 7 日,Apache Flink Meetup 上海站,上海的同学再次演绎了站无虚席的爆满场面。现场来自阿里巴巴、intel、趣头条的技术专家们分享了 Zeppelin 中玩转 Flink 与 Hive、趣头条的应用实践、Flink 性能优化、TensorFlow 与 Flink 的应用实践等众多干货内容,并有 Demo 演示环节。

深度学习 大数据 性能优化 Apache 数据处理 集群 平台架构 Hive demo 流计算 大数据分析 实时计算 ApacheFlink

联合 CNCF 共同出品:Kubernetes and Cloud Native Meetup 成都站

亮点解读 云原生前沿技术分享:阿里经济体“云原生化”宝贵经验与最佳实践成果 OpenKruise 价值几何? 防踩坑指南:国内知名容器平台架构师解读从 ECS 迁移到 K8S 走过哪些坑。 ​云原生服务坚定基石:Kata Container 在蚂蚁生产中的云原生核心价值。

native Cloud 平台架构 容器 钉钉 aliyun 云原生

小红书如何实现高效推荐?解密背后的大数据计算平台架构

小红书作为生活分享类社区,目前有8500万用户,年同比增长为300%,大约每天有30亿条笔记在发现首页进行展示。推荐是小红书非常核心且重要的场景之一,本文主要分享在推荐业务场景中小红书的实时计算应用。

大数据 平台架构 Image Hive schema 报表 session 流计算 推荐系统

交易数据清算从8小时缩至1.5小时,飞天大数据平台MaxCompute解决余额宝算力难题

关于天弘:天弘基金作为国内总规模最大的公募基金,阿里云MaxCompute为我们构建了企业级一站式大数据解决方案。MaxCompute对于海量数据的存储、运维、计算能力强大且安全稳定,阿里云服务将原本需要清算8小时的用户交易数据缩短至清算1个半小时,同时减少了本地服务器部署压力,在显著提升我们工作效率的同时减少了大量开发成本和人力成本,使我们能更专注于业务发展,为用户提供高品质、高价值的金融服务。

大数据 架构 飞天 敏捷开发 数据仓库 平台架构 解决方案 余额宝 云平台 存储 MaxCompute 千人千面

16
GO