5分钟迅速搭建云上Lambda大数据分析架构

  1. 云栖社区>
  2. 阿里云存储服务>
  3. 博客>
  4. 正文

5分钟迅速搭建云上Lambda大数据分析架构

宇珩 2019-10-18 15:15:01 浏览1678
展开阅读全文

背景

Spark 中国社区联合阿里云 EMR 技术交流群,Tablestore 技术交流群举办了一场联合技术直播。直播的话题是“海量结构化数据的实时计算和处理”,主要介绍基于 Tablestore 的数据变更实时捕获订阅能力,实现云上Lambda 架构的轻量化实现。在直播中有一个demo环节,本篇文章会提供demo环节的简单操作步骤,方便大家后续在阿里云上搭建和demo场景类似的一整套架构,实现数据的实时和离线处理。

演示场景介绍

演示模拟了一个电商订单场景,通过流计算实现订单大屏的场景,做到海量订单实时注入的同时,进行10s的订单统计聚合以及交易金额统计并做实时的大屏幕展示。整个订单的大屏幕样例如下:
image

大屏我们使用阿里云的 DATAV 对接 Tablestore数据源来实现,那么下面我们就具体看看从订单的原始数据到结果大屏数据的产生过程

网友评论

登录后评论
0/500
评论
宇珩
+ 关注
所属团队号: 阿里云存储服务