【飞天存储服务月报】2018年6月刊

  1. 云栖社区>
  2. 博客>
  3. 正文

【飞天存储服务月报】2018年6月刊

株莉 2018-07-12 12:39:42 浏览3411 评论1

摘要: 2018云栖大会上海峰会上,阿里云和115科技共同宣布完成全球互联网史上规模最大的公共云数据迁移,总量超过100PB。同时,整个过程仅耗时45天,刷新了百PB级数据公共云迁移的新纪录,打破AWS用时3个月完成70PB数据迁移记录,成为全球唯一。

【重点新闻】

1、产品降价:阿里云对象存储OSS刷新行业最低价

6月7日,在2018云栖大会·上海峰会上,阿里云宣布云存储产品开启新一轮降价,其中对象存储OSS产品价格下调了18.9%,刷新了云存储的全网最低价,表格存储TableStore按量读写及资源包最高下调50%。调价后,对象存储OSS标准型的最低售价为0.12元/GB/月,购买500TB存储资源包相当于用户每月最多可节省7000多元。此番调价将进一步扩大云存储对线下存储的竞争优势。

lALPBY0V45XxyT7M_M0DgQ_897_248_png_620x10000q90g

2、耗时仅45天!全球互联网史上规模最大的公共云数据迁移完成

在2018云栖大会上海峰会上,阿里云和115科技共同宣布完成全球互联网史上规模最大的公共云数据迁移,总量超过100PB。同时,整个过程仅耗时45天,刷新了百PB级数据公共云迁移的新纪录,打破AWS用时3个月完成70PB数据迁移记录,成为全球唯一。大会现场还原了用闪电立方迁移115数据中心的全过程:2分钟内就完成了2TB数据的安全传输过程。与此同时,阿里云推出了闪电立方Mini版,可提供单台40TB的数据迁移能力,图形化界面,引导式服务体验。

lADPBbCc1eNgbpnNBp7NDic_3623_1694_jpg_620x10000q90g

3、Workshop实操小课堂:小微金融业务跨平台数据共享与处理

近年来,各类小微金融创新背后是各种复杂的数据采集、交换以及构建的过程。在云栖大会上海峰会上,阿里云函数计算、对象存储OSS、表格存储TableStore、日志服务团队共同以一个第三方支付业务的风控场景为案例,演示如何通过阿里云产品解决核心数据互通的痛点,通过Serverless架构应对业务增长,与各计算分析引擎支持建立风控平台对机构和用户进行服务。

lADPBbCc1d0BkWbNAljNAyA_800_600_jpg_620x10000q90g

4、线下活动:LC3大会—开源数据湖存储专场

6月25日,由Linux 基金会举办的LC3开源技术大会在北京国家会议中心举办,LC3分别是指:LinuxCon、ContainerCon 及 CloudOpen 。在此次大会上的飞天技术汇专场,阿里云存储团队以开源数据湖为专场议题,贡献了《基于飞天的Lustre高可用高性能架构解析》《高性能网络技术下的阿里云盘古分布式存储技术变革》《大规模无服务器计算平台的挑战与实践》《Kubernetes下日志采集、存储与处理技术实践》、《开源大数据生态下的高性能分布式文件系统DFS》等五个主题分享。

lADPBbCc1gZ6b2rNBNrNBng_1656_1242_jpg_620x10000q90g

【新品集合】

1、混合云备份服务商业化

阿里云混合云备份(HBR)是一种简单且具有成本效益的备份即服务 (BaaS)。它可以为用户在数据中心、远程和分支机构、以及云上ECS主机的数据提供保护。混合云备份采用集成的全局客户端重复数据消除技术,能够有效降低网络带宽使用,快速完成数据全备份,压缩备份数据所需存储空间,确保用户数据能快速安全高效地备份到云上。
混合云备份支持VMware虚拟机镜像备份,用户可以在VMware平台上方便地部署HBR for VMware,将虚拟机镜像备份上云,避免了传统备份方案复杂的备份软件部署,存储资源规划,异地备份保护等难点。
混合云备份已经正式开始对用户提供商业化服务,收费项目包括保护终端授权费,云备份库空间使用费和备份数据恢复下行流量费,与传统备份方案相比,能为用户节约高达70%的总体方案成本。

2、中国首个混合云大数据双活容灾(HDR for Hadoop)发布

Hadoop集群的数据容灾一直以来是数据保护的一个难点,传统的基于快照+distcp复制技术,RPO都在小时到天级别,无法称为真正意义上的容灾。同时,灾备集群的资源闲置会产生极大浪费。HDR For Big Data是国内首个支持混合云架构下Hadoop集群双活容灾的方案,用户可以在部署于两个数据中心的Hadoop集群之间建立双向复制。在实现数据容灾的同时,两个集群可以独立运行不同的业务,实现集群双活,避免资源浪费。另外,HDR for Big Data还可以允许用户直接将Hadoop集群数据实时迁移至阿里云对象存储OSS,实现秒级RPO的数据备份和迁移。

3、函数计算发布CDN触发器功能,提高用户开发效率

阿里云函数计算正式推出 CDN 触发器,允许用户编写函数快速处理 CDN 的各类事件,解决了 CDN 用户在数据预热、数据刷新、数据封禁、访问日志处理等高需求场景下的痛点,大大提高了用户的开发效率。利用该功能,CDN 在预热和刷新用户数据后,会立即触发用户函数处理相关事件,避免用户不断轮询列表查询最新状态;当在 CDN 上发现违禁内容时,会立即触发用户函数删除源站资源,不需要等待 CDN 后台响应;日志文件生成后,会立即触发函数及时转存或者下载日志处理,相比之前,减少了 70% 日志下载的时间。

4、对象存储OSS Python SDK支持客户端加密,充分保障数据安全

阿里云对象存储OSS在支持Https、服务端加密的基础之上,最新发布了客户端加密功能,提供更丰富的数据安全保护能力。
首先,用户可以在数据发送至对象存储OSS前,先在本地通过OSS SDK将数据加密,再通过Https传输到OSS。同时,用户将数据从对象存储OSS下载到本地后,再通过OSS SDK进行解密,确保数据在传输过程、持久化阶段都处于加密状态。
此外,对象存储OSS客户端加密支持信封加密技术,并支持KMS托管用户主密钥和用户自主管理密钥两种密钥管理模式,满足用户对数据安全的更高要求。

5、日志查询分析支持MySQL数据源联合查询功能发布

在游戏运营、用户行为、网络等分析场景中,都会需要涉及到静态数据(例如道具属性、人员信息、硬件信息等),在过去离线计算方案下,需要复杂同步且至少分钟级以上的分析查询延时。通过阿里云日志服务查询分析功能(LogSearch/Analytics),提供MySQL这种存储与计算分离的外部数据源,解决了实时关联查询问题,该功能除了能将延时从分钟降为秒级外,还能解决异构数据源依赖性问题,灵活便捷,减少用户使用负担。

【技术实践】

1、《MySQL执行计划解析》

本文从MySQL的逻辑结构讲解、MySQL查询过程、执行计划的案例三部分重点介绍执行计划的输出参数,帮助用户选择最佳方案。

2、《函数计算中使用Puppeteer的过程分析》

函数计算中使用Puppeteer的过程遇到了代码包太大、依赖动态链接库等问题,文章给出函数计算解决类似问题的通用解决方案。

3、《三分钟学会如何在函数计算中使用Puppeteer》

Puppeteer是一个node库,提供了一组用来操纵Chrome的API,Puppeteer结合函数计算使用,可以快速地构建弹性服务。文章对在函数计算中使用Puppeteer的过程和步骤进行了详细介绍。

4、《10分钟上线-函数计算实现Serverless图片处理服务》

阿里云函数计算是事件驱动的全托管服务,开发者只需编写代码就能快速地开发出弹性高可用的后端系统。文章介绍使用函数计算快速实现图片处理服务的示例,为图片处理提供新思路方案。

5、《Kubernetes中Logtail日志采集CRD配置详解》

日志采集配置默认支持控制台配置方式,同时针对Kubernetes微服务开发模式,提供CRD的配置方式,本文将介绍如何使用kubectl对配置进行管理。

6、《日志服务支持Shard自动分裂》

日志服务的数据模型中,通常使用Shard来控制Logstore吞吐能力。数据量随时会突增,如果不能及时处理,将造成丢失的风险。本文介绍阿里云日志服务提供的Shard自动分裂功能技术实践。

【云栖快讯】一站式开发者服务,海量学习资源免费学  详情请点击

网友评论