1. 云栖社区>
  2. 全部标签>
  3. #数据存储与数据库#
数据存储与数据库

#数据存储与数据库#

已有85人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

MongoShake——基于MongoDB的跨数据中心的数据复制平台

MongoShake是基于MongoDB的通用型平台服务,作为数据连通的桥梁,打通各个闭环节点的通道。通过MongoShake的订阅消费,可以灵活对接以适应不同场景,例如日志订阅、数据中心同步、监控审计等。其中,集群数据同步作为核心应用场景,能够灵活实现灾备和多活的业务场景。

云栖社区 数据存储与数据库 分布式 Golang 日志 数据库 集群 索引 数据同步 数据中心 云数据库MongoDB版

智能媒体管理产品文档转换/预览功能介绍(4)--快速搭建

智能媒体管理提供了 Cloud Native 架构的文档转换/预览服务,本文介绍快速搭建的示例,让您用 DIY 的体验方式实现文档预览功能。

数据存储与数据库 架构 分布式系统与计算 OSS 阿里技术协会 paxos aliyun 开发环境 test html Office

【资料合集】2018云栖大会•上海峰会回顾合集:PDF下载

当高考遇到云栖大会,魔都科技盛会注定热闹非凡。本次上海峰会以“驱动数字中国”为主题,聚焦人工智能、金融、新零售、IoT等行业,集中展示如何利用"数字技术"带动企业转型,促进产业创新。

云栖社区 安全与风控 数据存储与数据库 系统研发与运维 移动开发与客户端 网络与数据通信 互联网产品及应用 故障方案 分布式 网络安全 前端与交互设计 架构 监控 云存储技术 云栖大会

优质技术文章征集、评选和资源推广

亲爱的同学们,为了增强阿里云数据库技术的影响力,将技术人的技术实力得以沉淀,同时使自己的个人品牌也有效得以提升,特提供技术文章征集平台,我们将对技术文章进行月度、季度、年度评选。我们的征集对文章有一些要求, 看似字数不少,但相信各位一定在技术分享的路上有很多心得和经验可以讲,期待大家的投稿作品!

云栖社区 数据存储与数据库 大数据 redis hbase 程序员 数据库 aliyun 解决方案 云数据库 褚霸

PostgreSQL 服务端COPY和客户端COPY - 暨PG有哪些服务端操作接口

标签 PostgreSQL , copy , 服务端接口 , 客户端接口 背景 有些朋友在使用COPY命令对数据库进行数据导入导出时,可能会发现COPY到文件时,怎么和想象的不一样,COPY到文件并没有落到指定的地方。

数据存储与数据库 PostgreSQL postgres 数据库 Server static file html csv

PostgreSQL pgbench 支持100万连接

标签 PostgreSQL , pgbench , poll , 超过1000连接 背景 《阿里云 RDS PostgreSQL 高并发特性 vs 社区版本 (1.6万并发: 3倍吞吐,240倍响应速度)》 最近测试的阿里云高并发版本的性能,在1.6万个连接下,实际SQL的响应速度是社区版本的240倍。

数据存储与数据库 PostgreSQL RDS 源码 高并发 测试 wget

PostgreSQL Failover slot - 支持将slot信息发送给物理备库

标签 PostgreSQL , slot , 备库 , failover 背景 PostgreSQL主库创建的slot(物理或逻辑的都算),在备库是否存在? 目前的版本,PG在主库创建的SLOT,备库是没有的(不会通过流复制协议复制到备库) (但是,2ND提出的failover slot,就是来解决这个问题的,在主库创建的slot,会通过流复制协议,发送给物理备库。

数据存储与数据库 PostgreSQL postgres 配置 物理备库 replication database plugin

PostgreSQL 单表并行bulkload的extend file lock 冲突问题解决

标签 PostgreSQL , 并行加载 , 扩展数据文件 , extend lock , 消除 背景 PostgreSQL的数据文件是一个一个BLOCK extend的,当并行的会话插入同一个表,并且都遇到free space map反馈无BLOCK可插时,需要extend数据文件,有两种做法: 1、老的版本,只有一个会话可以EXTEND FILE,其他会话等它EXTEND结束后继续EXTEND。

数据存储与数据库 PostgreSQL postgres lock 索引 test 分区表 timestamp file Digoal activity

从代码层判断 pg_basebackup 是否已正常结束 - 暨改进建议

标签 PostgreSQL , pg_basebackup 背景 用户通常会使用pg_basebackup来对PostgreSQL实施在线备份,对于超级大的数据库实例,可能需要备份很久。 如果将任务分解来看,假设备份是任务流中的一个步骤,如果设置了超时时间,那么在超时导致该步骤失败之后,如何判断pg_basebackup是否已执行成功? 1、从pg_basebackup的源码中分析,文件是否有备份顺序,是否可能从某些文件是否存在来判断? 2、从pg_basebackup的返回值或STDOUT中判断。

数据存储与数据库 PostgreSQL 日志 源码 void

Greenplum max_prepared_transactions 设置不正确时的症状 - too many clients already

背景 Greenplum分布式事务使用2PC提交,因此需要依赖max_prepared_transactions参数的配置。 原文 https://www.cnblogs.com/chenminklutz/p/8946269.html max_prepared_transactions 应该至少设置为 max_connections 一样大。

数据存储与数据库 PostgreSQL Greenplum postgres 数据库 Server test

PostgreSQL, SQL Server 逻辑增量 (通过逻辑标记update,delete) 同步到 Greenplum, PostgreSQL

标签 PostgreSQL , Greenplum , trigger , rule , 逻辑更新 , 逻辑删除 , 增量复制 背景 异构数据的增量同步是比较繁琐的事情,需要考虑很多事情,比如: 1、同步延迟 2、DDL的同步 3、同步时对上游性能的影响 4、上下游数据一致性 5、上游事务原子性...

数据存储与数据库 PostgreSQL Greenplum postgres Oracle SQL 同步 Server Create timestamp update

PostgreSQL Oracle PL/SQL 兼容性之 - AGGREGATE USING Clause 聚合函数

标签 PostgreSQL , Oracle , PL/SQL , 聚合函数 , 自定义聚合函数 背景 Oracle的自定义聚合函数的定义方法,在创建函数是,使用AGGREGATE USING Clause关键词。

数据存储与数据库 分布式 PostgreSQL 函数 Oracle SQL static 并行计算 兼容性 aggregate 数组

PostgreSQL Oracle 兼容性 - Analysis函数之keep

标签 PostgreSQL , Oracle , 分析函数 , 窗口函数 , keep 背景 Oracle 分析函数KEEP,类似OVER的语法结构(当然,含义与之不同)。keep可以用于普通的查询,也可以用于分组聚合,同时亦可用于窗口中。

数据存储与数据库 PostgreSQL postgres 函数 Oracle BY 兼容性 last Group

PostgreSQL copy (quote,DELIMITER,...) single byte char 的输入

标签 PostgreSQL , copy , 分隔符 , 包围符号 , 转义 , unicode 背景 PostgreSQL 可以通过COPY批量导入或导出数据,如果是文件操作是在数据库的SERVER端操作,如果是STDIN, STDOUT则是通过协议透传到客户端。

数据存储与数据库 PostgreSQL postgres Digoal csv single

Greenplum Oracle 兼容性之 - LOG ERRORS INTO

标签 PostgreSQL , Oracle , Greenplum , LOG ERRORS INTO 背景 Oracle支持DML的log errors,是一个很赞的功能。 https://docs.

数据存储与数据库 PostgreSQL Greenplum Oracle SQL LOG test 兼容性 database

PostgreSQL Oracle 兼容性之 - select for update of column_name (change to table_name or table_alias)

标签 PostgreSQL , Oracle , select for update of column 背景 当一个SELECT中包含多张表时(比如JOIN),FOR UPDATE可以指定要LOCK哪张表的匹配到的ROWS。

数据存储与数据库 PostgreSQL postgres Oracle lock 兼容性 Create update

PostgreSQL 自动创建分区实践 - 写入触发器

标签 PostgreSQL , 自动创建分区 , 触发器 , 写入 , 动态创建分区 背景 数据写入时,自动创建分区。 目前pg_pathman这个分区插件,有这个功能,如果你不是用的这个插件,可以考虑一下用触发器写入,并在触发器中实现自动创建分区。

数据存储与数据库 PostgreSQL postgres 函数 SQL exception test 分区表 插件 Create timestamp 存储过程

阿里云IPv6产品解读

阿里云IPv6产品解读 6月20日,阿里云宣布全面支持IPv6。 包括计算,存储,网络,数据库,安全,CDN等产品线的众多产品支持或即将支持IPv6。那么,阿里云支持IPv6的背景是什么?这些产品是如何支持IPv6的?背后的思考又是什么?本文将对这些问题进行解读。

云栖社区 数据存储与数据库 网络与数据通信 互联网产品及应用 VPC ECS 高可用 互联网 负载均衡 slb DNS 云解析 IPv6

123
GO