What’s New | 数据库产品技术月刊(2019.12—2020.1)

  1. 云栖社区>
  2. 阿里云数据库ApsaraDB>
  3. 博客>
  4. 正文

What’s New | 数据库产品技术月刊(2019.12—2020.1)

Roin123 2020-02-28 14:20:33 浏览1289
展开阅读全文

重点事件

1、阿里云峰会首次走进印尼,助力印尼实现“数字化愿景”,共享云上福利

1月16日,阿里云峰会首次来到了印度尼西亚首都雅加达,一同见证了印尼的数字化转型过程和取得的丰厚硕果。作为亚太区市场份额第一,并且也是唯一一家在印尼拥有数据中心的全球化公共云服务商,阿里云一直致力于帮助印尼企业实现“数字化愿景”,共享云上福利。在发布会现场,阿里巴巴集团副总裁、阿里云数据库产品事业部总裁李飞飞介绍了阿里云在下一代企业级数据库系统上的技术创新与实践。作为全球云数据库领跑者之一,阿里云数据库希望帮助亚太区合作伙伴加速数字化转型,利用云原生数据库技术,不断挑战新的业务高峰。

00001.png

链接:https://developer.aliyun.com/article/742971


2、阿里云峰会广州站圆满收官,一同探索产业数字化转型的核心技术

12月2日-3日,阿里云峰会广州站圆满收官,来自政府、企业界的参会嘉宾围绕“数字经济的新型基础设施”主题,探索产业数字化转型的核心技术,探讨如何实现数据化和智能化。

在全面上云专场,阿里云数据库资深技术专家天羽代表数据库团队分享《云时代企业数据库上云与数据库架构方案》,介绍“低成本、智能化、高安全的数据库能力 ”;合作伙伴广州嘉为科技CTO黄史浩现场分享了“传统数据库如何选型以及上云”,专业的实践分享获得现场听众频频点赞;此外,在峰会的合作伙伴授牌仪式上,阿里云数据库资深解决方案架构师佳毅向4家合作伙伴授予“数据库合作计划优秀合作伙伴”奖杯。

0002.png


3,阿里云分析型数据库AnalyticDB 荣膺中国信通院大数据产品评测双料认证

12月10日,由中国信息通信研究院、中国通信标准化协会、中国互联网协会联合主办的《2019数据资产管理大会》在北京召开。阿里云分析型数据库产品 AnalyticDB 获得了分析型数据库基础能力和性能双料认证。尤其在大规模性能认证方面,本次评测采用了全球最大规模的 TPC-DS 100TB 测试标准,阿里云 AnalyticDB 完成640节点的分布式分析型数据库性能测试,是迄今为止通过信通院评测认证的最大规模分布式分析型数据库集群,综合评测结果同领域领先。

0003.png

链接:https://developer.aliyun.com/article/739161


4,大型企业数据库服务首选,专属主机组RDS MySQL服务正式上线

2020年1月9号,RDS专属主机组和ECS专有宿主机召开联合发布会, RDS MySQL正式上线专属主机组产品。在RDS MySQL的所有能力之外,提供更多产品增值功能,包括数据库主机资源100%独占,提供数据库CPU超配能力。客户通过CPU超配,可实现在离线系统混部、低利用率的多业务系统共享超配CPU资源,可降低50%成本。为企业提供可靠、安全、高可用数据库服务,提供和RDS一样的SLA保障。

链接:https://developer.aliyun.com/article/742236


5,第七届CCF BDCI大赛圆满落幕,阿里云荣获“优秀合作伙伴”奖项

2019年12月22日,2019年第七届 CCF BDCI大数据与人工智能总决赛在河南省郑州市国展中心圆满落下帷幕。浙江大学“数据库性能挑战者”团队在561支参赛队伍及656位参赛选手中脱颖而出,摘得本次大赛桂冠。同时,阿里云作为本次大赛的重要合作伙伴,工作与努力也得到了赛事组织方的认可,被授予了“优秀合作伙伴奖”。
0004.png

链接:https://mp.weixin.qq.com/s/mvTOetOWPM8SKHwFibT-jQ


6,马来知名电商企业PrestoMall转投阿里云PolarDB,成本大幅降低

1月8日,马来西亚第三大电商企业PrestoMall抛弃传统甲骨文数据库,转投阿里云自主研发的PolarDB云数据库,替换后系统运行平稳,费用约为传统商业数据库的1/6。PolarDB协助PrestoMall在电商大促活动中创下了流量峰值,是国际去ORACLE数据库的第一单。同时在国内,零售ISV伯俊与PolarDB Oracle完成产品兼容性测试与性能压力测试,具备复制推广能力。
数据显示,采用云上数据库,费用约为传统商业数据库的1/6,成本可下降80%以上。
链接:https://developer.aliyun.com/article/742578


7,数据库发布年终成绩单,回望2019“高光时刻”

2019年,我们获得了Gartner、forrester等权威认可,荣誉上身,责任也更加艰巨;

2019年,我们的生态体系正逐渐丰富且完善,努力满足上云的多样化需求;2019年,我们有许多个闪耀的“高光时刻”,迫不及待地第一时间与大家分享;2019年,20余款产品提供了升级后的全新版本,给数据上云创造了愈来愈好的体验;2019年,我们还迎来了与多家企业的合作,阿里云数据库也将在实践中不断接受检验;2020年,我们的故事继续,将为客户提供更好的云数据库服务体验!
链接:https://developer.aliyun.com/article/741503

二、重大产品更新

  • PolarDB下一代云原生数据库

PolarDB支撑马来第三大电商公司Prestomall顺利去“O”

海外,马来第三大电商公司Prestomall借助PolarDB Oracle兼容版顺利替换Oracle数据库,替换后系统运行平稳,是国际去ORACLE数据库第一单。同时在国内,零售ISV伯俊与PolarDB Oracle完成产品兼容性测试与性能压力测试,具备复制推广能力。

PolarDB 菜鸟云和深圳金融云开服售卖

菜鸟物流云上线售卖PolarDB,支持MySQL、PostgreSQL、Oracle三个引擎, 开放全球11个地域,申通等客户已经开始试用,承载线下数据库上云重担。
PolarDB Oracle版本月新增深圳金融云、印度尼西亚两个Region。

000008.png

PolarDB 产品功能体验改进

PolarDB 持续优化与关联云产品的联合体验:本月云监控上线新版PolarDB报警规则、弹性伸缩ESS支持自动修改PolarDB白名单,帮助更多的存量用户使用PolarDB。PolarDB 本月还支持了经典网络地址,满足米哈游、众安保险等老客户平滑升级的诉求。

PolarDB 本月在内核上也做了大量的性能提升和体验优化。MySQL 版共完成17处代码优化,其中8.0版本全面升级加固,修复若干已知问题,保障客户业务稳定。Oracle兼容版完成了 索引DML支持预扩展、Logindex Buffer IO锁优化、审计日志buffer定期下刷、OOM优化,RO延迟优化等工作,同时完成4项兼容性开发和支持。

  • OLAP新一代在线交互式实时数仓

AnalyticDB MySQL基础版发布

2019年12月27日分析型数据库AnalyticDB重磅升级,推出新的产品系列—AnalyticDB MySQL基础版。基础版采⽤单ECS+云盘部署方式,可大幅减低用户IT成本,较之前的集群版本平均约50%的降幅。在成本降低的同时,相比开源MySQL仍然有10倍以上的分析性能提升。基础版的推出,可大幅降低企业用户使用大数据的成本,可方便用户快速享受到数据实时分析所带来的技术红利。其推出的多种规格,可满足中小规模用户的数据分析需求

AnalyticDB MySQL发布日志服务SLS实时投递功能

SLS实时投递到AnalyticDB MySQL版本月上线并全网发布。针对海量的日志类大数据,此产品提供了实时数仓解决方案,一站式提供数据收集、清洗和分析功能。大幅降低企业级客户日志分析的技术门槛,全面提升海量日志在线处理能力,实时挖掘日志数据价值。

云数据库ClickHouse发布公测

2019年12月18日,阿里云正式发布云数据库ClickHouse产品公测。开源列式数据库ClickHouse是2019年最火的开源分析型数据库产品,具有优异的海量数据分析查询性能。国内头部大型互联网公司均在大规模应用,部分企业甚至有上千台的规模。云数据库ClickHouse提供了一套企业级数据库管理平台,包括备份恢复、安全审计、弹性伸缩等增值服务的同时,提供完善的云上生态包括丰富的数据接入 & 和可视化功能。

分析型数据库AnalyticDB for PostgreSQL 6.0 正式商业化

分析型数据库PostgreSQL 6.0于12月31号正式商业化。6.0在功能和性能上均大幅提升,PG内核从8.3升级至9.4升级,DTS同步性能提升3倍; 另外新增复制表、在线平滑扩容、磁盘配额、zstd压缩功能。在存储格式上新增JSONB、HSTORE类型,满足日志等非结构化数据分析需求;数据管理角色和权限更加精细化;新版6.0的商业化为中小型企业混合事务分析HTAP场景,以及金融领域实时数仓构建提供更稳定、更具性价比的解决方案。

分析型数据库PostgreSQL版推出普惠型规格,进一步降低企业级客户入门门槛

分析型数据库AnalyticDB for PostgreSQL正式推出普惠型2节点规格,单实例2核CPU 16GB内存、160GB SSD有效存储空间,最低月消费860元,AnalyticDB for PostgreSQL 支持HTAP数据库混合负载,支持全并行分析计算,支持分布式下的数据库事务及隔离级别,具备高并发事务吞吐能力,是云上构建分布式数据分析和交易处理的高性价比选择。此次普惠型规格的推出,进一步降低了企业级客户的入门门槛。

分析型数据库MySQL版推出存储密集型规格,大幅降低使用成本

分析型数据库AnalyticDB for MySQL正式推出存储密集型规格S8。存储密集规格采用高效云盘,单节点容量从最大1TB提升到12TB,大容量场景下单位TB年成本从7.5w+ 降至 2w+。存储密集型和现有的基础版-单机型、集群版-计算密集型,共同构成AnalyticDB for MySQL较为完整的产品族,覆盖了从小规格、到中大规格;从高性能、到海量存储多类场景客户。

分析型数据库MySQL版海外开服加速,进一步迎接东南亚、大洋洲等潜在市场需求

为更好地满足海外市场对分析型数据库AnalyticDB for MySQL的需求,在首批开服的新加坡和日本的region后, 近期再次加速海外服务的速度,新开包括香港、孟买、雅加达、吉隆坡和悉尼五大region,进一步迎接未来潜在的东南亚、大洋洲市场客户需求。

  • RDS&NoSQL&管控工具

RDS for MySQL 8.0 发布三节点企业版:

RDS MySQL 8.0 发布三节点企业版形态,三节点企业版三可用区部署实例支持可用性SLO是99.99%,同时实例主节点和备节点之间数据复制是强同步,提供RPO=0的数据库解决方案。
本次发布的核心功能包括:① 8.0 三节点企业版形态,存储类型是本地SSD盘; ② 8.0 三节点企业版只读实例; ③ 8.0 三节点企业版独享代理,支持自动读写分离。

SQL Server Sa权限账号灰度开放,解决权限诉求

线下客户使用Sysadmin角色,上云后可无缝适配RDS SQL Server,适用于各大ISV的软件系统无缝适配上云。Sysadmin是最SQL Server高级别的权限开放,用户更加自主可控。
当前有条件限制短期开放中,可供意向客户临时适配验证。预计二月份中旬可支持长期开放。

RDS PostgreSQL 发布V12云盘基础版

低成本1TB内实时分析,数据库引擎的最佳选择。
OLTP在线事务处理与OLAP在线分析业务混合场景。
对可用性要求较低、可靠性要求很高对业务,例如偏分析的业务。

Redis 支持专享主机组形态

提供专享主机形态,实现主机级别用户资源隔离,另外未来还会提供 OS 开放能力,释放更高的自由度给客户,对齐客户 IDC 管理模式,降低上云成本。提供超卖设置,在业务允许范围内尽可能降低单实例成本。同时该产品形态完全复用 Redis 管控能力,方便客户进行基础运维管理。

MongoDB集群版支持可用区迁移

MongoDB集群版支持可用区迁移,方便客户进行资源管理。

HBase Serverless商用

低成本、免运维、即买即用、高弹行、按量计费

TSDB 2.0公测

面向时序时空一体化数据模型设计,动态Schema提高业务应用灵活;兼容ANSI SQL生态降低接入门槛,通过丰富的时序时空函数,支持时序聚合,空间查询等复杂分析

云Cassandra支持同城多DC部署。支持已有单DC实例在线扩展成为多DC实例

基于多DC部署,用户可构建同城多DC容灾方案,从而具备更高的容灾等级。

GDB支持实例监控告警

用户可以在GDB控制台监控告警页面,查看已有实例的性能(IOPS、时延等)、资源使用率(如CPU、内存、硬盘等)等指标。当实例有异常后,后台会告警给用户。使用户可便捷的管理数据库实例。

三、前沿技术

智能数据库ClouDBench完成7项业务场景测试,计划三月中旬上线

智能数据库 集团上云基于ClouDBench完成交易、库存等7个业务场景的压测和验证,除了性能和稳定性测试外,还可以帮助专家服务选型上云机型;确认了公有云用户使用智能调参进行数据库配置初始化,该功能是云上用户的强需求,计划三月中旬上线。

全加密数据库CFO线战投系统MySQL全加密版完成项目Kickoff

全加密数据库 CFO线战投系统MySQL全加密版正式完成项目Kickoff,目标3月中旬跑通数据库侧模拟业务场景,3月底启动业务联调;推动全加密技术实现国产化,启动基于FPGA加密卡的加密计算方案设计工作。

实验室与事业部合作3篇论文被系统与存储方向顶级会议收录

实验室与事业部合作3篇论文被系统与存储方向顶级会议USENIX ATC FAST 2020 (18th USENIX Conference on File and Storage Technologies) 收录。今年FAST共收到投稿138篇,仅接收23篇,而实验室就有3篇。我们的工作分别介绍了Tair (集团内以及双11核心系统,目前也在准备上云对外提供商业化服务),PolarDB存储利用计算存储加速,以及FPGA加速LSM compaction。这也是阿里巴巴第一次在FAST上发表论文。

四、最佳实践:

Tair

阿里云数据库产品事业部Tair产品全面上云,打造企业版Redis。Tair除了满足通用缓存服务的需求外,在大型客户上的服务能力久经阿里集团考验。云上发布之后,Tair的高性能,抗冲击能力,更丰富的扩展数据结构(modules),异地多活受到了不少客户认可;疫情期间,更是诸多在线教育和视频游戏类客户支持大流量客户访问的首选。

·    广州视源测试8节点Tair集群,稳定工作在200w+ OPS场景,对能力表示满意,随即下单开通数十套集群版,后续有更多套数的开通需求;而CC视频同样因为其高性能购入数十套套集群版。

·    百家互联由于在线教育业务暴涨,原使用社区版Redis的读写分离版,在mget 4w hgetall 1.1w cpu被打满;升级到企业版的读写分离后稳定服务了 10w mget和2.3w hgetall的峰值,客户后续全部变配到企业版。Tair虽然是社区版2倍的价格,但切实满足了客户更大流量的需求。

·    Tair的扩展数据结构,例如bloomfilter module和doc module,也被基分(登陆设备检测等),中青(过滤已推荐过的文章),凡卓互动(使用Doc构建前端)等大量使用,业务更加简化高效。

·    同时,Tair全球分布式缓存能力,满足了vipkid和寺库等大客户混合云的需求,通过Tair敏捷Paas版,帮助用户建设混合云之间稳定的双向乃至多向数据复制能力。

Lindorm

Lindorm是面向大数据领域的低成本NoSQL存储,在淘宝、支付宝、菜鸟等众多阿里核心业务久经大规模验证,目前已经全面上云,打造企业版HBase。其具备高性能、高压缩、主备多活、冷热分离、企业级备份、智能诊断等独家能力,同时内置多种索引及查询接口,赢得了申通、莉莉丝、兑吧等诸多大客户的认可,成为推荐、广告、风控、车联网、海量数据实时存取等场景首选数据库。

· 莉莉丝使用Lindorm存储游戏战斗回放、游戏聊天、广告日志等数据,通过冷热分离、FeedStream、高吞吐等特性满足游戏场景下的数据存储需求,良好保障了业务使用过程的平稳,助力其新游剑与远征的全国发行。

· 申通物流使用Lindorm存储包裹轨迹数据,顺利帮助客户平稳支撑双十一下的高吞吐,并通过高压缩、冷热分离、TTL等能力实现海量数据的低成本存储. 杭州兑吧广告平台使用Lindorm存储人群特征、实时行为流量等数据,通过主备双活、高吞吐、低延迟等特性满足广告实时匹配场景的需求,迁移至企业版后获得2倍的业务效果提升,得到用户高度认可。

五、客户案例

阿里云数据库助力中国联通,实现核心计费CBSS系统全国大集中

客户简介

中国三大运营商之一
国内31个省(自治区、直辖市)和境外多个国家和地区设有分支机构,2018世界品牌500强排名第236

业务挑战

省级系统做全国大集中,传统Oracle架构无法支撑超大系统。

目前架构缺乏弹性扩展能力。

核心计费业务需要解耦,采用分布式架构,但系统数量过多,会面临巨额Oracle license。

集团要求落地多活数据中心,树立行业标杆,传统Oracle数据库架构只支持主备模式。

解决方案

采用分布式集群数据库DRDS支撑核心计费CBSS系统,实现全国大集中。

业务改造为微服务架构,微服务底层采用分布式数据库DRDS做为支撑,云数据库原生具有弹性能力,增加节点集群整体并发和容量线性提升。

把阿里集团多活中心能力输出给客户,帮助用户建设客服系统双活数据中心。

阿里云数据库助力国家电网中台战略转型,同期线损系统迁移上云

业务/技术亮点:

各省接入5000W+设备量测数据

业务挑战

当前使用Oracle、GBase、Mysql、Hadoop的商业+开源数据架构,技术组件多样,应用难度大。
各省接入5000W+设备量测数据,需满足100W/s的数据写入性能。

海量量测数据实时查询需要秒级响应。
线损模型计算结果,要支撑应用层业务场景服务调用,满足高并发、低延时、毫秒级、海量数据实时多维分析需求。

解决方案

TSDB作为量测数据存储引擎,批量导入HBase历史量测数据,实时接入Oracle/E文件中增量量测数据,提供高速数据写入能力。

TSDB作为量测数据实时查询引擎,提供批量历史数据、历史时刻断面数据实时查询能力。

AnalyticDB MySQL作为分析层MPP数据库,接收共享层MaxCompute线损模型分析、计算结果数据,提供实时高并发在线分析,提供实时交互式查询能力。

用户档案数据与量测热数据汇总至AnalyticDB(ADB),提供量测数据与用户关系模型的联合查询能力。

网友评论

登录后评论
0/500
评论