1. 云栖社区>
  2. 全部标签>
  3. #数据存储与数据库#
数据存储与数据库

#数据存储与数据库#

已有24人关注此标签

内容分类:
博客 | 问答 | 课程 |

阿里云&袋鼠学院邀您一起共同探讨“云上如何不烦恼”

2017年注定是云计算大势爆发的一年。   从2009年阿里云成立,到2017年第三季度财报的公布:   8年的时间,国内企业经历了从“云是何物? ”的问道期,到如今阿里云积累的76.5万付费用户;   从当初质疑云计算的安全可靠,到如今深刻体验到“云”带给企业的科技红利。

数据存储与数据库 系统研发与运维 故障方案 大数据 架构 阿里云 高可用 面向对象 互联网 人工智能 基础设施 阿里巴巴 袋鼠云 传统企业

阿里云,企业云云解决方案的加速器,提升企业云形象,巩固企业云数据安全

最早使用阿里云的产品是阿里云的ECS,但是仅仅是单纯的使用,这一次单纯的使用,也使我打开了阿里云产品的潘多拉宝盒。 随着公司业务的增长,以及2014年微信产品的多样化的出现,公司15年下半年的时候一批利用企业公众号发红包的业务,初次接受此类业务,也没什么经验,以为只是单纯的类似于产品销售的业务,但是在活动上线后出现了让人预料不到的结果,由于参加活动的人数远远超出服务器的连接数(预估同时并发人数达到3-4万),整个系统陷入崩溃。

云栖社区 数据存储与数据库 互联网产品及应用 redis 分布式系统与计算 阿里云 服务器 OSS ECS 集群 数据安全 弹性伸缩 解决方案 slb ESS

绝世好剑 - 文本集、图片集、商品集、数组相似判定的优化和索引技术 (实时识别转载\盗图\侵权?)

标签 PostgreSQL , rum , tsvector , array , smlar , 相似度 , 内容去重 , 内容筛选 , 转载 , 盗图 , 侵权 , 内容过滤 背景 同一个热点事件,可能有很多的媒体报道。

数据存储与数据库 算法 PostgreSQL postgres 索引 test index 数组

into outfile csv问题:

into outfile 问题: 导出数据出现:ERROR 1290 (HY000): The MySQL server is running with the --secure-file-priv option so it cannot execute this statement root@

数据存储与数据库 mysql variables csv

INFORMATION_SESSION_VARIABLES feature is disabled问题

mysql5.7 客户端连接出现:INFORMATION_SESSION_VARIABLES feature is disabled问题: 从mysql5.7.6开始information_schema.global_status已经开始被舍弃,为了兼容性,mysql提供了向下兼容的参数:show_compatibility_56,默认是OFF。

数据存储与数据库 mysql HTTPS 配置 兼容性

不要等到把数据搞大了才分析

我们一谈到数据分析,总离不开大数据,但要发挥大数据分析的真正价值并没有想象的那些容易,DMS倡导:不要等到把数据搞大了才分析。

数据存储与数据库 大数据 监控 mysql RDS 数据库 数据分析 数据同步 高性能 list 数据管理 大数据分析

PostgreSQL bitmapAnd, bitmapOr, bitmap index scan, bitmap heap scan

标签 PostgreSQL , bitmap index scan , bitmap heap scan 背景 在PostgreSQL中,多个单列索引是可以用在组合查询SQL中的,也就是说实现了bitmap scan。

数据存储与数据库 PostgreSQL postgres 索引 index page

PostgreSQL GIN 单列聚集索引 应用

标签 PostgreSQL , gin , 聚集索引 , 单列 背景 聚集存储比较好理解,数据按照聚集KEY存储在一个或相邻的数据块中,对聚集KEY的轨迹、行为数据检索可以大幅减少IO。 那么聚集索引呢?我们知道通常BTREE索引中存储的是KEY以及对应数据的堆表行号,每条记录一个索引条目。

数据存储与数据库 PostgreSQL postgres 高并发 测试 索引 test index Create 存储

批量删除数据后, 未释放empty索引页导致mergejoin执行计划变慢 case - 分析与规避方法

标签 PostgreSQL , merge join , min , max , 优化器 , 索引倾斜 , 垃圾回收 背景 PostgreSQL支持三种JOIN的方法,nestloop, merge, hash。

数据存储与数据库 PostgreSQL postgres 索引 index page

分析型数据库+数据传输,构建企业级实时数仓

传统的离线数据仓库,将业务数据集中进行存储后,以固定的计算逻辑定时进行ETL 和其它建模后产出报表等应用。离线数据仓库一般采用每日或每几个小时进行一次计算的方式,计算和数据的实时性均较差,业务人员无法根据自己的即时性需要获取几分钟之前的实时数据。

数据存储与数据库 大数据 架构 实时系统 数据可视化 阿里云 HTTPS 模块 数据库 高并发 数据仓库 分析型数据库 数据传输 实时计算 数仓

MongoDB sharding迁移那些事(三)

如果不了解 MongoDB Sharded Cluster 原理,请先阅读 MongoDB Sharded cluster架构原理 关于MongoDB Sharding,你应该知道的 关于 sharding 迁移,会分3个部分来介绍,本文为第三部分 负载均衡及迁移策略 chunk 迁移流程 Balancer 运维管理 在前面2个部分里,介绍了 MongoDB sharding 的迁移策略以及 chunk 迁移的步骤,本文将主要介绍如何管理 Balancer,以更好的为业务服务。

数据存储与数据库 MongoDB 负载均衡

MongoDB sharding迁移那些事(二)

如果不了解 MongoDB Sharded Cluster 原理,请先阅读 MongoDB Sharded cluster架构原理 关于MongoDB Sharding,你应该知道的 关于 sharding 迁移,会分3个部分来介绍,本文为第二部分 负载均衡及迁移策略 chunk 迁移

数据存储与数据库 MongoDB 分布式数据库 sharding

MongoDB sharding迁移那些事(一)

如果不了解 MongoDB Sharded Cluster 原理,请先阅读 MongoDB Sharded cluster架构原理 关于MongoDB Sharding,你应该知道的 关于 sharding 迁移,会分3个部分来介绍,本文为第一部分 负载均衡及迁移策略 chunk 迁移

数据存储与数据库 MongoDB sharding

关于MongoDB Sharding,你应该知道的

MongoDB Sharded Cluster 原理 如果你还不了解 MongoDB Sharded cluster,可以先看文档认识一下 中文简介:MongoDB Sharded cluster架构原理 英文汇总:https://docs.mongodb.com/manual/shard

数据存储与数据库 MongoDB

MyRocks之备份恢复

--- title: MySQL · myrocks · myrocks之备份恢复 author: 张远 --- myrocks支持逻辑备份和物理备份,逻辑备份仍然采用mysqldump,物理备份采用自己开发的myrocks_hotbackup工具,传统的物理备份工具Xtrabackup不支持rocksdb。

数据存储与数据库 备份 mysql innodb 阿里技术协会 path Transaction mysqldump file SST MY rocksdb myrocks rocks_hotbackup

配置升级云上Oracle RAC性能

阿里云上Oracle RAC环境性能到底表现如何,通过环境配置,RAC架构调整,以及Oracle RAC数据库的优化等多重调整后,看RAC在高配ECS上的表现。由于配置的提升,压测策略有所调整,由RAC分发压力改为业务分割,每个节点跑独立的业务,减少争用,充分利用资源提升带来的好处,方便达到性能最优配置。

数据存储与数据库 监控 阿里云 Oracle 性能 数据库 配置 主机 测试 袋鼠云 云盘 qps DB RAC CPU

PostgreSQL 聚集存储 与 BRIN索引 - 高并发行为、轨迹类大吞吐数据查询场景解说

标签 PostgreSQL , 聚集存储 , cluster on index , brin , 轨迹数据 , 范围查询 , 线性相关性 , hbase , json , jsonb , hstore , key-value , text 背景 在现实生活中,人们的各种社会活动,会产生很多的行为数据,比如购物、刷卡、打电话、开房、吃饭、玩游戏、逛网站、聊天 等等。

数据存储与数据库 PostgreSQL postgres 高并发 索引 test index Create Digoal 存储 数组

30
GO