1. 云栖社区>
  2. 全部标签>
  3. #数据同步#
数据同步

#数据同步#

已有2人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

一道真实的面试题 | 如何保证消息队列的高可用

5万人关注的大数据成神之路,不来了解一下吗?5万人关注的大数据成神之路,真的不来了解一下吗?5万人关注的大数据成神之路,确定真的不来了解一下吗? 欢迎您关注《大数据成神之路》 面试题:如何保证消息队列的高可用? 面试官心理分析 如果你的简历里写了MQ,如果有人问到你 MQ 的知识,高可用是必问的。

云栖社区 分布式 大数据 消息队列 高可用 镜像 集群 同步 MQ 数据同步 面试题

浅谈数据同步之道

大数据 Image 数据同步

大白话讲解分布式里面的cap原则

什么叫做cap Cap分别指可用性,分区容错性,一致性 分区容错性 如下图中,G1 和 G2 是两台跨区的服务器。G1 向 G2 发送一条消息,G2 可能无法收到。系统设计的时候,必须考虑到这种情况。

分布式 java 服务器 cap 数据同步

探索Redis设计与实现15:Redis分布式锁进化史

Redis分布式锁进化史 近两年来微服务变得越来越热门,越来越多的应用部署在分布式环境中,在分布式环境中,数据一致性是一直以来需要关注并且去解决的问题,分布式锁也就成为了一种广泛使用的技术,常用的分布式实现方式为Redis,Zookeeper,其中基于Redis的分布式锁的使用更加广泛。

分布式 redis 算法 数据同步

搞懂分布式技术4:ZAB协议概述与选主流程详解

ZAB协议 ZAB协议是专门为zookeeper实现分布式协调功能而设计。zookeeper主要是根据ZAB协议是实现分布式系统数据一致性。

分布式 算法 服务器 zab 集群 同步 数据同步 分布式系统 Commit zookeeper

阿里云RPA(机器人流程自动化)精品系列之一:跨网机器人解决方案

本文是阿里云RPA精品系列的开篇之作,主要介绍跨网机器人解决方案的基本概念、技术架构、核心竞争力、适用场景以及实施交付过的一些成功案例,希望能帮助读者解决一些实际业务上的痛点,起到抛砖引玉的效果。

架构 人工智能 电商 aliyun 解决方案 数据同步 机器人 ipa 机器人流程自动化 跨网传输 数据同步机 内外网隔离 业务协同 可视化识别

Apache NiFi之MySQL数据同步到HBase

一.说明 将Apache NiFi做为关系型数据与非关系型数据库的数据同步工具使用,在此场景中需要将mysql导出的avro数据格式转化为json入库HBase 二.开拔 Ⅰ).配置ExecuteSQLRecord a).

mysql hbase Apache 数据库 配置 解决方案 Driver 数据同步 database 表空间 zookeeper NiFi

Apache NiFi之MySQL数据同步

一.简述 Apache NiFi是一个易用、强大、可靠的数据处理与分发系统,Apache NiFi的设计目标是自动化管理系统间的数据流Apache NiFi是美国国家安全局(NSA)开发和使用了8年的一个可视化、可定制的数据集产品。

mysql Apache 数据流 配置 数据同步 database 数据存储 MySQL数据同步 NiFi

Apache Doris接入Kafka实时流数据

一.简述 Apache Doris是由百度的Palo项目开源而来,整体架构分为两层:多个 FE 组成第一层,提供 FE 的横向扩展和高可用;多个 BE 组成第二层,负责数据存储于管理。 FE 节点分为 follower 和 observer 两类。

Apache 高可用 数据库 数据同步 Create 存储 数据存储 流数据 Doris Palo

mongodb复制原理透析

文章转载自:http://www.mongoing.com/archives/5200笔者最近在生产环境中遇到许多复制相关问题,查阅网上资料发现官方文档虽然系统但是不够有深度,网上部分深度文章则直接以源码展示,不利于大家了解。

数据存储与数据库 MongoDB 高可用 数据库 配置 同步 数据同步

使用EMR-Kafka Connect进行数据迁移

流式处理中经常会遇到Kafka与其他系统进行数据同步或者Kafka集群间数据迁移的情景。使用EMR Kafka Connect可以方便快速的实现数据同步或者数据迁移。本文介绍使用EMR Kafka Connect的REST API接口在Kafka集群间进行数据迁移。

分布式系统与计算 Apache 数据库 配置 集群 Image 数据迁移 同步 e-mapreduce EMR 数据同步 zookeeper kafka 流式处理

海量结构化数据存储技术揭秘:Tablestore表设计最佳实践

前言 表格存储Tablestore是阿里云自研的面向海量结构化数据存储的Serverless NoSQL多模型数据库。在处理海量数据时,方案设计非常重要,合理的设计才能够发挥出数据库的性能水平。本文主要介绍Tablestore在表设计方面的一些实践经验,供大家参考。

数据存储与数据库 系统研发与运维 大数据 架构 最佳实践 数据库 解决方案 索引 数据同步 表格存储 timestamp 数据存储

DLA一键建仓

DLA很早之前就支持了对关系型数据库的查询,但是一直以来用户会有一个担心: 直接分析RDS里面的数据会不会影响线上业务。 这个担心很合理,除非你要查询的RDS是专门用来做后台数据分析使用的,否则直接大规模分析确实可能会造成数据库性能下降,影响前台业务。

OSS RDS 数据库 配置 同步 数据同步 schema DLA

使用EMR-Kafka Connect进行数据迁移

本文介绍使用EMR Kafka Connect的REST API接口在Kafka集群间进行数据迁移,使用distributed模式。

云栖社区 系统软件 移动开发与客户端 Json Apache 数据库 配置 集群 Image 数据迁移 同步 流式计算 EMR 数据同步 安全问道

redis-full-check校验工具

redis-full-check是阿里云Redis&MongoDB团队开源的用于校验2个redis数据是否一致的工具,通常用于redis数据迁移后正确性的校验。

云栖社区 redis 数据同步 云数据库Redis版 数据校验

关于Redis的几件小事 | 高并发和高可用

关于Redis的几件小事 | 高并发和高可用如果你用redis缓存技术的话,肯定要考虑如何用redis来加多台机器,保证redis是高并发的,还有就是如何让Redis保证自己不是挂掉以后就直接死掉了。

redis 架构 监控 高可用 高并发 配置 集群 node 数据同步 磁盘

HBase TB级数据规模不停机迁移最佳实践

有关HBase集群如何做不停服的数据迁移一直都是云HBase被问的比较多的一个问题,目前有许多开源的工具或者HBase本身集成的方案在性能、稳定性、使用体验上都不是很好,因此阿里云提供了BDS迁移服务,可以帮助云上客户实现TB级数据规模不停机迁移

hbase 日志 配置 集群 数据迁移 同步 数据同步

90
GO