1. 云栖社区>
  2. 全部标签>
  3. #磁盘#
磁盘

#磁盘#

已有2人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

Serverless Spark的弹性利器 - EMR Shuffle Service

###背景与动机 ####计算存储分离下的刚需 计算存储分离是云原生的重要特征。通常来讲,计算是CPU密集型,存储是IO密集型,他们对于硬件配置的需求是不同的。在传统计算存储混合的架构中,为了兼顾计算和存储,CPU和存储设备都不能太差,因此牺牲了灵活性,提高了成本。

架构 性能 配置 reduce Image spark EMR ESS 磁盘 service 存储

运维大杀器来了,未来云上服务器或将实现无人值守

9月26日,阿里巴巴高级技术专家滕圣波在《GOPS全球运维大会》上发表了题为《云上服务器无人值守与自助服务实战》的主题演讲,本文根据滕圣波的演讲整理。

架构 监控 服务器 ECS 基础设施 Image 弹性计算 磁盘 客服

JindoFS缓存加速数据湖上的机器学习训练

背景介绍 近些年,机器学习领域快速发展,广泛应用于各行各业。对于机器学习领域的从业人员来说,充满了大量的机遇和挑战。Tensorflow、PyTorch等深度学习框架的出现,使开发者能够轻松地构建和部署机器学习应用。

深度学习 分布式 配置 集群 容器 Image 对象存储 test 带宽 磁盘 存储 数据存储

EMR本地盘实例大规模数据集测试

阿里云最佳实践频道:【点击查看更多上云最佳实践】这里有丰富的企业上云最佳实践,从典型场景入门,提供一系列项目实践方案,降低企业上云门槛的同时满足您的需求! 场景描述 阿里云为了满足大数据场景下的存储需求,在云上推出了本地盘D1机型,这个系列提供了本地盘而非云盘作为存储,提高了磁盘的吞吐能力,发挥Hadoop的就近计算优势。

大数据 高可用 测试 数据迁移 云盘 aliyun e-mapreduce EMR 磁盘 自动化运维 存储

基于JindoFS+OSS构建高效数据湖

为什么要构建数据湖 大数据时代早期,Apache HDFS 是构建具有海量存储能力数据仓库的首选方案。随着云计算、大数据、AI 等技术的发展,所有云厂商都在不断完善自家的对象存储,来更好地适配 Apache Hadoop/Spark 大数据以及各种 AI 生态。

大数据 OSS hdfs hadoop 性能 c++ 高可用 集群 spark 对象存储 高性能 磁盘 存储

9月10日 Spark 社区直播【利用持久内存提速Spark】

主要探讨如何在Spark上使用持久内存这一新技术来进一步提速性能。具体会介绍基于Plasma的共享内存方案来提速SQL数据源访问的性能以及利用持久内存扩展Spark现有内存磁盘存储层级来提速RDD cache在迭代式计算中的效果。

大数据 性能 钉钉 spark 磁盘 存储

这可能是你见过最好的Redis主从复制原理

在Redis复制的基础上(不包括Redis Cluster或Redis Sentinel作为附加层提供的高可用功能),使用和配置主从复制非常简单,能使得从 Redis 服务器(下文称 slave)能精确得复制主 Redis 服务器(下文称 master)的内容。

redis 高可用 配置 node 同步 脚本 replication 磁盘

数据处理能力相差 2.4 倍?Flink 使用 RocksDB 和 Gemini 的性能对比实验

在本篇文章中我们将对 RocksDB、Heap 和 Gemini 在相同场景下进行压测,并对其资源消耗进行对比。测试的 Flink 内核版本为 1.10.0。

性能 数据处理 配置 测试 对象存储 离线计算 page 磁盘 存储 数据存储

专为流式数据设计的另一种缓存:流式缓存技术解读

并非所有的缓存都生来平等,本文将详细描述一种创新的缓存方案,它在流式用例上能够良好运作。

性能 测试 索引 磁盘 数据结构 存储 数组

阿里云 Elasticsearch 内核的这些优化,帮助开发者轻松挑战PB级数据量

本文将揭秘阿里云在面对 PB 级数据量挑战下所做的内核优化实践。

算法 性能 数据处理 高可用 配置 集群 Image 云盘 索引 Elasticsearch 磁盘 存储

mysql的索引呢?你又知道多少?

云栖号资讯:【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来! 在Java面试中必问mysql,问mysql的时候索引也是必问,可见索引有多么重要。简单的说索引是一种为了提高数据检索效率的一种数据结构。

mysql 索引 磁盘 数据结构 存储 数组

轻松看懂时序数据库 TSDB控制台监控

通过控制台,可以监控各实例的三个主要性能指标:每秒写入数据点、时间线数量和磁盘占用率。

监控 数据库 控制台 aliyun 磁盘

混合云容灾服务使用限制有哪些?

本文档介绍连续复制型容灾(CDR)在操作系统、基础架构、数据库和应用等方面的限制。

架构 服务器 数据盘 数据库 系统盘 操作系统 aliyun 脚本 容灾 磁盘

简单了解InnoDB底层原理

云栖号资讯:【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来! 存储引擎很多文章都是直接开始介绍有哪些存储引擎,并没有去介绍存储引擎本身。那么究竟什么是存储引擎?不知道大家有没有想过,MySQL是如何存储我们丢进去的数据的?其实存储引擎也很简单,我认为就是一种存储解决方案,实现了新增数据、更新数据和建立索引等等功能。

mysql innodb 日志 LOG 索引 binlog 磁盘 表空间 存储 myisam

从网络文件系统到对象存储,聊聊对象存储的前世今生

每种技术的产生都有其原因,也有其渊源。网络文件系统的产生有几十年的历史了,但是由于在互联网盛行的当下无法满足某些需求,于是对象存储产生了。今天我们就从从网络文件系统说起。

架构 算法 性能 互联网 Image 对象存储 swift 磁盘 存储

你分得清MySQL普通索引和唯一索引了吗?

普通索引和唯一索引 普通索引可以重复,唯一索引和主键一样不能重复。 唯一索引可以作为数据的一个合法验证手段,例如学生表的身份证号码字段,我们人为规定该字段不得重复,那么就使用唯一索引。(一般设置学号字段为主键) 主键和唯一索引 主键保证数据库里面的每一行都是唯一的,比如身份证,学号等,在表中要求唯一,不重复。

mysql innodb 性能 LOG 索引 磁盘 表空间

738
GO