1. 云栖社区>
  2. 全部标签>
  3. #数据同步#
数据同步

#数据同步#

已有2人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

连载:阿里巴巴大数据实践—数据开发平台

介绍MaxCompute和阿里巴巴内部基于MaxCompute的大数据开发套件,并对在数据开发过程中经常遇到的问题和相关解决方案进行介绍。

大数据 监控 数据仓库 数据安全 测试 aliyun 回归测试 数据同步 Mapreduce 存储 工作流 MaxCompute 海量数据

数据传输服务 DTS升级实例配置的注意事项及操作!

如果当前实例配置无法满足业务需求,您可以升级实例配置。

配置 Image 数据迁移 按量付费 控制台 aliyun 数据订阅 数据同步 html

架构师们,怎么走着走着就变“烟囱”了呢?

这两年,随着中台概念的兴起,一种IT过去的常态,现在的明星反面教材——“烟囱式架构”被反复提及并为大家所熟知。

架构 模块 pos 电商 API 数据同步 客服

程序员都该懂的 CAP 定理

云栖号资讯:【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来! 面对可能出现的网络延迟,不可预估的请求流量等情况,设计一个分布式系统,我们通常围绕系统高可用,数据一致性的目标去规划和实现,想要完全实现这个目标,却并非易事。

架构 程序员 高可用 cap 电商 同步 数据同步 分布式系统

生活物联网平台设置数据同步操作步骤

当生活物联网平台与第三方企业服务器之间需要进行数据传输时,需要通过HTTP/2 SDK实现数据同步,同步的数据包括设备信息和用户信息。

Image 同步 aliyun 物联网 数据同步 html

数据传输服务 DTS查看任务日志操作步骤

通过任务日志,您可以查看任务时间轴和运行日志信息。任务时间轴以时间线的维度展示购买、配置、运行、故障、运行完成等关键节点的任务状态信息;运行日志可根据时间范围或任务的状态信息进行筛选,以便快速定位所需的日志信息。

日志 配置 Image 数据迁移 控制台 aliyun 数据订阅 数据同步

MySQL高可用方案之DRBD+MySQL+RHCS(上)

MySQL作为最流行的数据库,它的高可用方案也是多种多样,其中用的比较多的是MHA+增强版半同步。但是客户使用的是DRBD+RHCS的方案,通过各方寻找安装资料,最终形成一个完整的安装文档,供参考 一、DRBD介绍 1.1 DRBD基本功能 Distributed Replicated Block Device(DRBD)是一种基于软件的,无共享,复制的存储解决方案,在服务器之间的对块设备(硬盘,分区,逻辑卷等)进行镜像。

mysql 模块 高可用 配置 主机 同步 数据同步 磁盘 存储

快速搞懂DataHub删除同步任务

在创建完成同步任务后,不需要使用可以对同步任务进行删除,具体删除步骤如下。

配置 Image 同步 aliyun 数据同步

互联网业务全球化互通组网

本方案适用从事全球化业务的客户,希望借助全球互通的网络,实现多地域的互通。同时在全球互联的网络下,搭建应用多地部署。如果业务中涉及到高速通道,提供高速通道迁移云企业网的操作演练;涉及到跨账号多 VPC 下的数据迁移和同步,本方案提供详细的操作步骤,帮助客户快速完成演练。

RDS VPC 云服务器 数据库 互联网 Image 数据迁移 负载均衡 同步 数据同步 存储

互联网、电商及游戏行业实时BI分析

本文以电商行业为例,将业务数据和日志数据同步到ADB,之后通过Quick BI做实时可视化分析。相对于传统的关系型数据库,阿里云分析型数据库MySQL版只需要几毫秒的时间,即可查询PB级数据并从中找到匹配信息。

mysql 日志 云服务器 互联网 电商 Image 运营 分析型数据库 数据同步

从单体到微服务再合并,我们找到了平衡点

我们公司也从单体转向了微服务,但最后在二者之间找到了一个平衡点,微服务的一些好处是切实存在的,但它的一些缺点和潜在风险也不可忽视。

监控 postgres 基础设施 微服务 测试 同步 数据同步

浅谈异地多活及阿里云容灾经验分享

异地多活,英文Multi-Site High Availability,顾名思义就是分布在异地多个站点同时对外提供服务。与传统灾备最主要的区别是“多活”里所有站点都是同时在对外提供服务的,具体有以下几点不同: - 传统的灾备中心平时不提供服务,关键时刻无法确定切换到灾备中心是否可以切换成功。

架构 高可用 集群 电商 数据同步 容灾 云平台 数据中心 异地

如何成为一个合格的数据架构师?

数据成为企业不可忽视的重要资产。而数据架构师则是企业数据资产最重要的“奠基者”。

大数据 架构 算法 数据库 数据仓库 数据同步 数据结构

如何成为一个合格的数据架构师?

早在 1980 年,未来学家阿尔文·托夫勒就在《第三次浪潮》中,将大数据比喻为“第三次浪潮的华彩乐章”。

大数据 架构 算法 数据库 数据仓库 数据同步 数据结构

交互式分析(Hologres)2020年5月刊

交互式分析(Hologres)2020年5月刊将会为您带来4月产品、技术最新动态。

大数据 配置 数据仓库 数据迁移 钉钉 同步 aliyun 数据同步 异构数据

收藏!一张图帮你快速建立大数据知识体系

本文对大数据技术知识体系进行划分,共分为基础技术、数据采集、数据传输、数据组织集成、数据应用、数据治理,进行相关的阐述说明,并列出目前业界主流的相关框架、系统、数据库、工具等。

分布式 大数据 架构 数据处理 数据库 数据仓库 集群 Image 流式计算 数据同步 分布式系统 分布式存储 数据采集 存储 海量数据

奈学教你五分钟学会分布式事务

从概念开始 我们先从事务的定义开始。事务即一系列读存动作被当作一个执行单元,这些动作要么全成功,要么全失败,执行动作的过程中保证数据的隔离性和一致性。 我们抛离数据库这个特定场景,先假设一个数据存储设备,我们定义两个标准操作,一个读一个写。

分布式 消息队列 线程 数据库 多线程 数据同步

案例解析 | 阿里云数据库助力特步全渠道业务稳步上云

“利用DRDS产品的高并发写和海量存储能力,我们支撑了全国几千家门店的零售全渠道业务的数据写入和读取,支撑了特步全渠道业务中台的业务。DRDS的横向扩展能力确保门店快速扩展时候的数据库良好的读写扩展性。

大数据 数据处理 数据库 高并发 DRDS 解决方案 金融 数据同步 报表 存储 数据存储 海量数据 全站上云 特步

一次DTS同步延时过高的排错过程

业务场景: 秒级数据同步要求的容灾场景,通过阿里云数据库同步工具DTS实时将阿里云上RDS的数据实时同步至自建MySQL数据库故障现象: DTS同步延时高达2小时,造成主备数据不一致,无法满足业务的容灾需求排查经过: 首先,联系阿里云DTS后台,后台同学反馈,目标数据库RT(响应时间)过高。

mysql RDS SQL 线程 数据库 主机 同步 索引 数据同步 容灾 CPU

98
GO