1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. L>
  5. 流式存储

当前主题:流式存储

云原生存储的思考 (一)什么是云原生存储

云原生存储的思考 (一)什么是云原生存储 Abstract 最近有幸参加了有PingCap和CNCF组织的面向云原生面相持久化应用的Meetup,结合最近对云存储,开源存储,云原生存储的思考,对云原生存储到底是什么,需要做些什么,云原生存储未来挑战是什么,做

阅读全文

数据中台的存储系统和计算平台枚举

作者:向师富 转自:阿里巴巴数据中台官网 https://dp.alibaba.com采集&传输层 Sqoop Hadoop、关系型数据库之间传输数据的工具。传输时,会启动多个MR作业并发的传输数据 DataX 阿里巴巴开源的数据同步工具,用来在各种异构数据

阅读全文

E-MapReduce 4.0产品新特性

演讲嘉宾:王晓平,花名子关,高级产品经理 视频回放地址:https://developer.aliyun.com/live/1402?spm=a2c6h.12873587.0.0.560314b8CiquAr 以下内容根据演讲视频以及PPT整理而成。 本次的

阅读全文

NoSql数据库

随着互联网web2.0网站的兴起,非关系型的数据库现在成了一个极其热门的新领域,非关系数据库产品的发展非常迅速。而传统的关系数据库在应付web2.0网站,特别是超大规模和高并发的SNS类型的web2.0纯动态网站已经显得力不从心,暴露了很多难以克服的问题,如

阅读全文

带你读《Kubernetes进阶实战》之三:资源管理基础

点击这里查看第一章:Kubernetes快速入门点击这里查看第二章:资源管理基础 第3章:资源管理基础 Kubernetes系统的API Server基于HTTP/HTTPS接收并响应客户端的操作请求,它提供了一种“基于资源”(resource-based)

阅读全文

带你读《企业数据湖》之三:Lambda架构:一种数据湖实现模式

第3章Lambda架构:一种数据湖实现模式 在前一章中介绍数据湖的一系列概念时,粗略地提到了Lambda架构。在本章中,我们将介绍Lambda架构的一些细节,并解释该架构模式在本书的数据湖实现方案中的重要意义。 本章虽然会尽量涵盖Lambda架构范式的全部细

阅读全文

带你读《企业数据湖》之二:数据湖概念概览

第2章数据湖概念概览 数据湖概念的诞生,源自企业面临的一些挑战,如数据应该以何种方式处理和存储。最开始,企业对种类庞杂的应用程序的管理都经历了一个比较自然的演化周期。最开始的时候,每个应用程序会产生、存储大量数据,而这些数据并不能被其他应用程序使用,这种状况

阅读全文

使用Spark Streaming SQL进行PV/UV统计

1.背景介绍 PV/UV统计是流式分析一个常见的场景。通过PV可以对访问的网站做流量或热点分析,例如广告主可以通过PV值预估投放广告网页所带来的流量以及广告收入。另外一些场景需要对访问的用户作分析,比如分析用户的网页点击行为,此时就需要对UV做统计。 使用S

阅读全文

流式存储相关问答

提问题

阿里云实时计算 Flink支持哪几个流式数据输入?维表输入?结果表输出?

目前支持流式输入表有: 大数据总线(DataHub) 日志服务(LogService) 消息列队(MQ) 支持维表有: 表格存储(TableStore) 云数据库(RDS) 支持输出表有: 大数据总线(DataHub) 日志服务(

阅读全文

企业大数据平台仓库架构建设思路【精品问答集锦】

本期请来了阿里云高级技术专家李金波(介然)直播分享企业大数据平台仓库架构建设思路 直播简介 随着互联网规模不断的扩大,数据也在爆炸式地增长,各种结构化、半结构化、非结构化数据的产生,越来越多的企业开始在大数据平台下进行数据处理。作为大数据应用的基础-数

阅读全文