数加分析型数据库:让你的数据探索更灵活、准确、快速响应和高并发

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
简介: 在大数据时代,大家越来越注重数据探索的灵活性、准确性、快速响应和高并发。为此,阿里云数加团队在结合多年应用经验的基础上,推出了分析型数据库。那什么是分析型数据库,它主要有什么优势,能解决哪些问题呢?
在大数据时代,大家越来越注重数据探索的灵活性、准确性、快速响应和高并发。为此,阿里云数加团队在结合多年应用经验的基础上,推出了分析型数据库。

什么是分析型数据库?

分析型数据库(Analytic DB,原名ADS),是阿里巴巴自主研发的海量数据实时高并发在线分析(Realtime OLAP)云计算服务,能让用户可以在毫秒级针对千亿级数据进行即时的多维分析透视和业务探索。分析型数据库对海量数据的自由计算和极速响应能力,能让用户在瞬息之间进行灵活的数据探索,快速发现数据价值,并可直接嵌入业务系统为终端客户提供分析服务。

推出分析型数据库,是希望带来什么?
 
四个“More”总结一下:

首先,数加团队希望数据能够More Accessable——希望海量数据不仅仅用于给少数人的决策报告,而是让更多的业务人员能够使用到数据,甚至将数据开放成在线数据产品或者大数据SaaS服务,提供给广阔的用户群体。
 
其次是More Data:互联网和物联网的高速发展,带来了海量的用户和行为数据,同时也让数据的价值密度大幅变低,如果再使用抽样的方式,则更不容易探索到有价值的insight。需要在数百GB、TB甚至PB级别的海量数据中直接进行分析、探索、挖掘,才能获得数据的价值。
 
再次是More Ways:大数据应用已经开始摆脱传统的特定模型的BI报表,变成以数据自由洞察、灵活洞察为形态的数据产品,例如支持数十上百中用户属性和行为自由组合和探查的CRM、拥有上千个标签的m-DMP系统、支持多种维度筛选访问的访问日志分析系统、支持任意商品属性组合筛选的交易报表等等。
 
最后是More Realtime:大数据时代瞬息万变,所以很多客户希望分析到数分钟前产生的准实时数据,尤其是在物联网行业,海量的传感器每分每秒都在上传自己的信息;而数据探索越来越灵活带来了快速进行交互式(无固定SQL Pattern)的在线实时计算需求。

分析型数据库与传统OLAP引擎相比,有什么优势呢?

  • 自由灵活的计算:无需预先建模,利用分布式计算技术,在保证自由探索的基础上高速得到计算结果,数据模型类似关系数据库的关系表
  • 高并发、高可用:通过双副本在线双活技术极大的提高了查询可用性,并且可以通过扩容实现查询、写入并发性能水平扩展,最高可达数千QPS的并发
  • 快速响应:通过分布式计算技术,在海量数据上能够支撑毫秒级到数秒的计算响应时间
  • 支持数据实时入库:支持通过insert/delete进行数据准实时更新入库,数据更新到可查询延迟一般不超过2分钟,通过购买更多资源可以水平扩展至数十万条/秒的数据插入速率,并且支持通过阿里云数据传输实时订阅RDS的数据变更到分析型数据库中
  • 良好的协议兼容性:对MySQL连接协议有良好的兼容性,使用MySQL在各个语言的Driver便可连接和使用,也部分兼容第三方BI工具和ETL工具如kettle、Qlikview、PowerQuery for Excel等可以使用MySQL协议连接到分析型数据库
  • 高性价比:在100GB-1TB数据量、一天5万次查询(典型的数据探索应用查询模式)的场景,分析型数据库的高性能实例比自建Hbase+Phoneix或ElasticSearch集群的成本最高降低60%以上,并且拥有更好的查询性能和稳定性;在5TB以上、一天500次查询(内部分析系统)的场景下,即将推出的大容量实例也比自建Impala/Presto等集群的成本低30%以上 

那么,什么场景中适合应用分析型数据库呢?

  • 海量数据下CRM、DMP业务
  • 报表型大数据产品
  • Ad-Hoc类大数据产品
  • 需要频繁交互和分析的内部BI系统
  • 将海量数据直接对接应用于业务系统的应用
  • 替换传统企业内部OLAP引擎

实际上,目前已经有很多客户信任并使用阿里云的分析型数据库,比如美柚、网聚宝、天弘基金、优酷土豆、阿里健康、阿里妈妈等。

相关连接:
 
1.分析型数据库产品简介: 点此进入
2.分析型数据库产品概述: 点此进入
3.分析型数据库购买指南: 点此进入
相关实践学习
数据库实验室挑战任务-初级任务
本场景介绍如何开通属于你的免费云数据库,在RDS-MySQL中完成对学生成绩的详情查询,执行指定类型SQL。
阿里云云原生数据仓库AnalyticDB MySQL版 使用教程
云原生数据仓库AnalyticDB MySQL版是一种支持高并发低延时查询的新一代云原生数据仓库,高度兼容MySQL协议以及SQL:92、SQL:99、SQL:2003标准,可以对海量数据进行即时的多维分析透视和业务探索,快速构建企业云上数据仓库。 了解产品 https://www.aliyun.com/product/ApsaraDB/ads
目录
相关文章
|
2月前
|
Prometheus 网络协议 JavaScript
api 网关 kong 数据库记录请求响应报文
Kong的tcp-log-with-body插件是一个高效的工具,它能够转发Kong处理的请求和响应。这个插件非常适用于需要详细记录API请求和响应信息的情景,尤其是在调试和排查问题时。
48 0
api 网关 kong 数据库记录请求响应报文
|
2月前
|
缓存 安全 API
【亿级数据专题】「高并发架构」盘点本年度探索对外服务的百万请求量的API网关设计实现
公司对外开放的OpenAPI-Server服务,作为核心内部系统与外部系统之间的重要通讯枢纽,每天处理数百万次的API调用、亿级别的消息推送以及TB/PB级别的数据同步。经过多年流量的持续增长,该服务体系依然稳固可靠,展现出强大的负载能力。
55 9
【亿级数据专题】「高并发架构」盘点本年度探索对外服务的百万请求量的API网关设计实现
|
6月前
|
存储 数据挖掘 BI
数据平台发展史-从数据仓库数据湖到数据湖仓 1
数据平台发展史-从数据仓库数据湖到数据湖仓
|
1月前
|
关系型数据库 MySQL OLAP
PolarDB +AnalyticDB Zero-ETL :免费同步数据到ADB,享受数据流通新体验
Zero-ETL是阿里云瑶池数据库提供的服务,旨在简化传统ETL流程的复杂性和成本,提高数据实时性。降低数据同步成本,允许用户快速在AnalyticDB中对PolarDB数据进行分析,降低了30%的数据接入成本,提升了60%的建仓效率。 Zero-ETL特性包括免费的PolarDB MySQL联邦分析和PolarDB-X元数据自动同步,提供一体化的事务处理和数据分析,并能整合多个数据源。用户只需简单配置即可实现数据同步和实时分析。
|
1月前
|
SQL 数据采集 存储
数据仓库(12)数据治理之数仓数据管理实践心得
这边文章聊聊自己对数据治理开发实践的一些思路,就是聊聊怎么开始去做数据治理这件事情。说起数据治理,有时候虽然看了很多文章,看了很多的介绍,了解数据治理的理论,但是实际上需要我们去搞的时候,就会踩很多的坑。这里记一下自己做数据治理的一些思路,做做笔记,也分享给需要的同学。 当然,想要做数据治理,想要学习了解,一下数据治理的范围,理论等,最好可以看看别人怎么做的,了解数据治理可以参考:[数据仓库(11)什么是大数据治理,数据治理的范围是哪些](https://zhuanlan.zhihu.com/p/467433967)。
233 0
|
1月前
|
存储 大数据 数据管理
数据仓库(09)数仓缓慢变化维度数据的处理
数据仓库的重要特点之一是反映历史变化,所以如何处理维度的变化是维度设计的重要工作之一。缓慢变化维的提出是因为在现实世界中,维度的属性并不是静态的,它会随着时间的流逝发生缓慢的变化,与数据增长较为快速的事实表相比,维度变化相对缓慢。阴齿这个就叫做缓慢变化维。
211 2
数据仓库(09)数仓缓慢变化维度数据的处理
|
2月前
|
SQL 安全 算法
在高并发情况下,如何做到安全的修改同一行数据?
在高并发情况下,如何做到安全的修改同一行数据?
|
2月前
|
存储 消息中间件 Java
【亿级数据专题】「高并发架构」盘点本年度探索对外服务的百万请求量的高可靠消息服务设计实现
在深入研究了 **“【亿级数据专题】「高并发架构」盘点本年度探索对外服务的百万请求量的API网关设计实现”** 设计实现后,我们意识到,尽管API网关为服务商提供了高效的数据获取手段,但实时数据的获取仍然是一个亟待解决的问题。
39 1
【亿级数据专题】「高并发架构」盘点本年度探索对外服务的百万请求量的高可靠消息服务设计实现
|
3月前
|
SQL 分布式计算 Java
数仓学习---7、数据仓库设计、数据仓库环境准备、模拟数据生成
数仓学习---7、数据仓库设计、数据仓库环境准备
126 2
|
3月前
|
SQL 存储 分布式计算
Hologres实时湖仓能力增强,挑战5分钟加速分析OSS数据
5分钟快速使用Hologres实时湖仓能力,无需移动数据,直接加速读取存储于数据湖OSS上的Hudi、Delta、Paimon等格式类型的数据