1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. S>
  5. shard

当前主题:shard

基于Shard-Jdbc分库分表,数据库扩容方案

本文源码:GitHub·点这里 || GitEE·点这里 一、数据库扩容 1、业务场景 互联网项目中有很多“数据量大,业务复杂度高,需要分库分表”的业务场景。 这样分层的架构 (1)上层是业务层biz,实现业务逻辑封装; (2)中间是服务层service,封

阅读全文

PostgreSQL 11 相似图像搜索插件 imgsmlr 性能测试与优化 3 - citus 8机128shard (4亿图像)

标签 PostgreSQL , imgsmlr , GiST , 图像特征值 , 小波转换 , citus 背景 续 《PostgreSQL 11 相似图像搜索插件 imgsmlr 性能测试 1 - 单机单表 (4亿图像)》 《PostgreSQL 11 相似

阅读全文

日志服务支持Shard自动分裂

日志服务的数据模型中,使用Shard来控制Logstore的写入、读取吞吐能力,每个Shard提供5MB/sec写入、10MB/sec读取,通常情况下,shard越多,Logstore的吞吐越大。 在创建Logstore时,可以根据实际数据量来进行预先设置s

阅读全文

CLI使用案例9:Shard不够?使用CLI一行命令搞定配置

背景 我们知道,日志服务的每个Project有一定的资源限制,你是否遇到如下情况呢? 1. 创建Shard时,最多配置10个Shard,但是预期Logstore会有更大数据量写入尤其是查询读取需求? 2. 手工在Web控制台进行分裂,因为无法把握均匀分布,且

阅读全文

solrcloud replica collection core shard slice 概念讲解

solr4.0 正式发布有一段时间了,目前是BETA版,从ALpha版到beta新增加了collection的概念,本文就Solr4.0中的多个索引相关概念再做详细的说明。本文以beta版为基础 solr4.0 的所以继承Lucene的分段索引方式,采用了多s

阅读全文

为什么 K8s 集群达万级规模,阿里购物体验还能如丝顺滑?

阿里妹导读:本文主要介绍阿里巴巴和蚂蚁金服在大规模生产环境中落地 Kubernetes 的过程中,在集群规模上遇到的典型问题以及对应的解决方案,内容包含对 etcd、kube-apiserver、kube-controller 的若干性能及稳定性增强,这些关

阅读全文

SpringCloud实现分库分表模式下,数据库实时扩容方案

本文源码:GitHub·点这里 || GitEE·点这里 一、项目结构 1、工程结构 2、模块命名 shard-common-entity: 公共代码块 shard-open-inte: 开放接口管理 shard-eureka-7001: 注册中心 shar

阅读全文

SOFAJRaft-RheaKV MULTI-RAFT-GROUP 实现分析 | SOFAJRaft 实现原理

SOFAStack Scalable Open Financial Architecture Stack 是蚂蚁金服自主研发的金融级分布式架构,包含了构建金融级云原生架构所需的各个组件,是在金融场景里锤炼出来的最佳实践。 SOFAJRaft 是一个基于 Ra

阅读全文

shard相关问答

查看更多 提问题

如何删除DataHub中的Shard?

DataHub里面的Shard,只支持分裂和合并,不支持删除。

阅读全文

【Flink】DataHub中Shard在只读状态下可以被读取数据么?

问题场景 DataHub中Shard在只读状态下可以被读取数据么? ![48](https://yqfile.alicdn.com/00a901c0595d9028c5a899c4c4310c5ec4a0933d.jpeg)

阅读全文

【Flink】为什么Shard数据抽样中只显示最后一条向DataHub插入的数据?

题描述 Shard数据抽样中只显示最后一条向DataHub插入的数据。 ![27](https://yqfile.alicdn.com/6dc21ca1b823fe9361e223bcc594ac4f5bdb4589.jpeg) 问题原因 当Shard

阅读全文

mongo shard扩容遇到的问题

我当前正在为一组shard扩容 之前是3 shard,70亿数据,1.2T,2.4.3 当我将其扩容到6 shard之后发现几个问题: 1. 通过mongostat查看mongos,发现每秒的写入量在500个左右,而新增加的shard分到的写入量在1~

阅读全文

mysql分库分表你们是用mycat,还是shard-jdbc,还是oneproxy?

本问题来自云栖社区【Redis&MongoDB 社区大群】。https://yq.aliyun.com/articles/690084 点击链接欢迎加入社区大社群。

阅读全文

如何在shard环境中平衡unsharded collection

我们有一些数据量比较大的业务数据, 采用sharding的方式存储. 这样可以把数据打散到不同的机器. 我们也有一些日志数据, 是按每个租户一个collection, 做成cappped, 只保留一定量的数据, 用于后台跑一些批处理用. 每个collecti

阅读全文

mongo磁盘扩容问题

mongo集群中有9个shard,由于某些原因,mongo中只有一个数据库,所以,没有开启分片的collections都放在了主shard上了,主shard的磁盘已经接近写满了,不知道有什么好的办法释放空间,所以打算新增一块大点的云盘,将现在磁盘上的所有数据全

阅读全文

mongodb集群分片数据查询问题

我在做mongodb集群测试,把集群中一台机器停掉后,其他服务器不能正常工作了,我的环境是: 服务器A:shard1,shard2,shard3,config,mongos 服务器B:shard1,shard2,shard3,config,mongos

阅读全文