阿里云文件存储CPFS升级版本发布

本文涉及的产品
对象存储 OSS,20GB 3个月
对象存储 OSS,恶意文件检测 1000次 1年
对象存储 OSS,内容安全 1000次 1年
简介: 文件存储CPFS 2.0性能功能全面升级

文件存储CPFS (Cloud Parallel File Storage),是阿里云完全托管、可扩展的并行文件存储系统。针对高性能计算场景的性能要求进行了深度优化,提供对数据毫秒级的访问和高聚合IO吞吐、高IOPS的数据读写请求,可以用于AI深度训练、自动驾驶、基因计算、EDA仿真、石油勘探,气象分析,机器学习,大数据分析以及影视渲染等业务场景中。
文件存储CPFS本次升级版本针对性能和功能进行了全面优化:
百GB/s的吞吐能力

  • 文件存储采用条带化技术,单个文件跨节点和存储系统分布,提高并发访问性能。数据块的大小可自定义,64K, 128K,256K, 512K, 1M,2M,4M,8M,16M,基于块大小选择的可变子块大小(subblock size),改善许多小文或大文件工作负载的性能。
  • 智能预取机制,通过对文件访问模式的预测来进行预取,降低读写延迟
  • 本地只读缓存(LROC):扩展page pool内存,包括本地DAS/SSD支持读缓存,基于策略引擎压缩,压缩有意义的数据并扩展至缓存
  • 分布式的块级锁管理,包括文件和目录两个级别,允许最大程度的并发访问;分布式元数据服务器,避免元数据处理成为系统瓶颈;分布式闪存加速元数据,元数据包括目录, inodes, indirect blocks
  • 支持客户端数据缓存,不同节点可以根据需要设置不同的缓存大小
  • 支持RDMA协议,大幅降低的节点间软件路径延迟

灵活的弹性扩展能力

  • 一键式扩容,扩展整个存储系统容量后自动对数据进行均衡
  • 吞吐随着容量线性增长,最大可以扩展到数百GB/s
  • IOPS随着容量线性增长,最大可以扩展到数百万IOPS
  • 可支持数千规模集群的计算节点并发访问
  • 单文件系统可以支持PB级的容量和10亿级的文件数量

混合云架构

  • 支持CPFS公共云和CPFS混合云存储线上线下数据打通,线下CPFS混合云存储在不满足突发业务增量的时候,可以将业务burst上云。

详细信息请参考CPFS产品文档

相关文章
|
28天前
|
缓存 安全 Java
阿里云数据库 SelectDB 内核 Apache Doris 2.0.6 版本正式发布
阿里云数据库 SelectDB 内核 Apache Doris 2.0.6 版本正式发布
|
1月前
|
SQL 存储 JSON
阿里云数据库 SelectDB 内核 Apache Doris 2.1.0 版本发布:开箱盲测性能大幅优化,复杂查询性能提升 100%
亲爱的社区小伙伴们,Apache Doris 2.1.0 版本已于 2024 年 3 月 8 日正式发布,新版本开箱盲测性能大幅优化,在复杂查询性能方面提升100%,新增Arrow Flight接口加速数据读取千倍,支持半结构化数据类型与分析函数。异步多表物化视图优化查询并助力仓库分层建模。引入自增列、自动分区等存储优化,提升实时写入效率。Workload Group 资源隔离强化及运行时监控功能升级,保障多负载场景下的稳定性。新版本已经上线,欢迎大家下载使用!
阿里云数据库 SelectDB 内核 Apache Doris 2.1.0 版本发布:开箱盲测性能大幅优化,复杂查询性能提升 100%
|
2月前
|
存储 监控 安全
360 企业安全浏览器基于阿里云数据库 SelectDB 版内核 Apache Doris 的数据架构升级实践
为了提供更好的日志数据服务,360 企业安全浏览器设计了统一运维管理平台,并引入 Apache Doris 替代了 Elasticsearch,实现日志检索与报表分析架构的统一,同时依赖 Doris 优异性能,聚合分析效率呈数量级提升、存储成本下降 60%....为日志数据的可视化和价值发挥提供了坚实的基础。
360 企业安全浏览器基于阿里云数据库 SelectDB 版内核 Apache Doris 的数据架构升级实践
|
2月前
|
存储 监控 安全
阿里云网盘与相册问题之如何开通历史版本
阿里云网盘与相册是阿里云提供的云存储服务,用户可以安全便捷地存储和管理个人文件、照片等数据;本合集将介绍如何使用阿里云网盘和相册服务,包括文件上传、同步、分享,以及处理常见使用问题的技巧。
35 1
|
1月前
|
人工智能 算法 物联网
阿里云百炼最新能力升级,你都有哪些期待?
阿里云百炼大模型服务产品全新升级,探索算法和技术创新,共享阿里集团内环业务的模型构建经验。
|
10天前
|
消息中间件 人工智能 监控
|
12天前
|
弹性计算 前端开发 Java
使用阿里云 mqtt serverless 版本超低成本快速实现 webscoket 长链接服务器
使用阿里云 MQTT Serverless 可轻松实现弹性伸缩的 WebSocket 服务,每日成本低至几元。适用于小程序消息推送的 MQTT P2P 模式。前端需注意安全,避免 AK 泄露,采用一机一密方案。后端通过调用 `RegisterDeviceCredential` API 发送消息。示例代码包括 JavaScript 前端连接和 Java 后端发送。
103 0
|
18天前
|
消息中间件 Cloud Native Serverless
飞天发布时刻丨阿里云 ApsaraMQ 全面升级,携手 Confluent 发布全新产品
阿里云在3月29日的飞天发布时刻宣布ApsaraMQ全面升级,实现全系产品Serverless化,与Confluent合作推出新产品,强化云原生消息队列服务。
|
1月前
|
弹性计算
2024阿里云服务器购买、续费、升级配置价格表新鲜出炉!
2024年阿里云服务器购买、续费、升级优惠政策整理,阿里云服务器优惠价格表:轻量2核2G3M服务器61元一年、2核4G4M带宽165元1年,云服务器4核16G10M带宽26元1个月、149元半年,阿里云ECS云服务器2核2G3M新老用户均可99元一年续费不涨价,企业用户2核4G5M带宽199元一年。
393 2