1. 云栖社区>
  2. 全部标签>
  3. #同步#
同步

#同步#

已有0人关注此标签

内容分类:
博客 | 问答 | 课程 |

【双11背后的技术】双11晚会背后的技术

作者:邵雍   回顾2015年在鸟巢举行的第一届双11晚会,我们可以称之为“全民互动”的晚会。因为不止是现场的几千位观众,全国所有在电视机面前的观众朋友,都可以拿起手机,打开天猫客户端或淘宝客户端,参与到晚会现场的各个明星互动游戏中来,进行红黑押宝,获胜的人,还能抢到一元商品。

双11 线程 互联网 同步 控制台 AR 数据结构 直播

【双11背后的技术】万亿级数据洪峰下的分布式消息引擎

作者:冯嘉、誓嘉、尘央、牟羽  前言 通过简单回顾阿里中间件(Aliware)消息引擎的发展史,本文开篇于双11消息引擎面临的低延迟挑战,通过经典的应用场景阐述可能会面临的问题 - 响应慢,雪崩,用户体验差,继而交易下跌。

分布式 架构 算法 双11 高可用 集群 阿里中间件 同步 解决方案 分布式系统 消息引擎

【双11背后的技术】AliCloudDB——双11商家后台数据库的基石

作者:玄惭 前言 2016年天猫双11购物狂欢节已经完美落下帷幕,千亿成交的背后,作为整个天猫商家后台数据库的基石,AliCloudDB是如何保障在零点洪峰来临时候稳定、安全和顺畅?如此庞大规模的数据库实例集群又是怎样一步步成长起来的?AliCloudDB团队核心老司机玄惭,为你带来,双11是这

安全 架构 RDS 双11 性能 SQL 高可用 数据库 同步 AliCloudDB 索引 数据同步 数据中心

【双11背后的技术】永不停止的脚步——数据库优化之路

作者:佳毅 前言 2016年双11已经顺利落下帷幕,在千亿电商流量的冲击下,集团数据库整体表现完美。完美表现的背后,隐藏着数据库团队对技术的执着追求。这是一个什么样的团队,他们究竟做了什么,是什么支持着双11这一全民狂欢的数字一次次突破?笔者以一个亲历者的角度来给大家揭开双11背后,阿里巴巴数据库团队的神秘面纱。

双11 memcached 性能 SQL 数据库 DRC 阿里巴巴 集群 电商 同步 数据同步 应用服务器 存储 异地 数据库优化

大数据来了,数据库爆仓了,宝宝们怎么办?

双11来了,快递企业包裹量剧增。数据显示,11月10日到11月17日7天时间,全行业需要处理的快件量近6亿件,日最高处理量将接近1亿件,是今年以来日常处理量的3倍。 虽然各大快递公司都事先增加了人员、设备、仓库,提升了运能,但面临的压力仍旧空前。

大数据 HTTPS 数据库 数据分析 同步 aliyun 数据同步 html 存储 数据存储 MaxCompute 海量数据

如何基于MySQL及Redis搭建统一的kv存储服务 | 秦波

本文介绍基于MySQL及Redis搭建统一的kv存储服务:常用部署方式及其特点,Cluster manager,MySQL和Redis集群方案,以及Sync数据同步服务。

redis 架构 mysql 数据库 cluster 集群 数据迁移 同步 string KV存储 数据同步 binlog 存储

常用的Linux命令

人应该活的真善美。不虚伪、不做作、直率、干脆,这是真;以同情之心待人,以恻隐之心爱人,这是善;沟通心灵和仪表,融合人类与自然,这是美。以真善美的品味做人,其乐无穷。 关机 (系统的关机、重启以及登出 ) shutdown -h now 关闭系统(1) init 0 关闭系统(2) telinit 0 关闭系统(3) shutdown -h hours:minutes

linux gzip 根目录 SSH 同步 磁盘 file

【转】聊聊高并发系统之队列术 京东技术 www.toutiao.im

声明:本文转载自微信公众号“开涛的博客”,转载务必声明。   队列在数据结构中是一种线性表,从一端插入数据,然后从另一端删除数据。本文目的不是讲解各种队列算法,而是在应用层面讲述使用队列能解决哪些场景问题。   在我开发过的系统中,不是所有的业务都必须实时处理、不是所有的请求都必须实时反馈结

redis 消息队列 线程 高并发 同步 数据同步 存储 队列 京东

物联网与互联网,云计算,大数据的互联结合产生超凡的应用

    物联网是指各类传感器和现有的互联网相互连接的一种技术。物联网是建立在计算机互联网的基础上的,利用IFID无线或有线数据通信等技术构成一个覆盖世界上万事万物在这个网络中,物品(商品)能够彼此进行交流,而无需人的干扰。

分布式 大数据 定位原理/算法 无线 互联网 集群 同步 物联网

搭建数据仓库的流程简介

如何搭建一个数据仓库? 下面大体说明了搭建的流程。

大数据 监控 mysql Oracle 数据仓库 同步 存储 数据存储 数据管理

Infrastractor As Code中Code与物理资源同步的原理分析

上篇文章讲到《企业应用如何解决Multi-Cloud的基础设施管理及应用部署问题》,其核心是使用Terraform的模板管理基础设施,虽然Terraform的中文资料较少,好在Aliyun官方仓库的Example目录中提供了大量的模板参考,参考这些模板将能够管理常用的云服务。 什么是Infrast

云服务器 基础设施 同步 Terraform infrastratorAsCode tfstate 基础设施即代码

redis4.0、codis、阿里云redis 3种redis集群对比分析

本文对redis4.0版本的cluster,codis,以及阿里云redis 3种集群进行了对比分析。

数据存储与数据库 redis 阿里云 性能 线程 cluster 集群 负载均衡 同步

数据一致性-分区可用性-性能—多副本强同步数据库系统实现之我见

本文将跳出任何一种数据库,从原理的角度上来分析下面的几个问题: 问题一:数据一致性。在不使用共享存储的情况下,传统RDBMS(例如:Oracle/MySQL/PostgreSQL等),能否做到在主库出问题时的数据零丢失。 问题二:分区可用性。有多个副本的数据库,怎么在出现各种问题时保证系统的

数据存储与数据库 Oracle 性能 日志 数据库 主机 同步 磁盘 存储

【大数据技巧】数据导入到MaxCompute的技巧汇总

用Fluent实现MySQL到ODPS数据集成 ---可以通过Fluentd将其它系统数据利用DHS导入到ODPS中 海量数据计算应该如何选择数据库 ---MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型,能够更快速的解决用户海量数据计算问

大数据 mysql RDS 数据库 odps 同步 分布式计算 数据同步 MaxCompute 海量数据 大数据平台

mysql-bin.000001文件的来源及处理方法

mysql的数据文件夹里出现mysql-bin日志文件,通过my.cnf注释掉log后,是否可以删除了? 参考 http://database.51cto.com/art/201107/278988.htm 详细介绍mysql-bin.000001文件的来源及处理方法 在MySQL数据库中,mysql-bin.000001、mysql- bin.000002等文件是数据库的操作日志,例如UPDATE一个表,或者DELETE一些数据,即使该语句没有匹配的数据,这个命令也会存储到日志文件中,还包括每个语句执行的时间,也会记录进去的。

服务器 mysql 日志 数据库 同步

如何将服务从经典网络迁移到VPC

为了更好的隔离性、安全性和网络性能,我们将服务迁移到了VPC环境中。迁移过程试图做到让用户无感知,我们做了很多尝试和深入探究,并记录下详细过程和解决方案。

docker 阿里云 RDS HTTPS VPC ECS 容器 测试 同步 slb 迁移VPC

一个复杂系统的拆分改造实践

1 为什么要拆分? 先看一段对话。 从上面对话可以看出拆分的理由: 1)  应用间耦合严重。系统内各个应用之间不通,同样一个功能在各个应用中都有实现,后果就是改一处功能,需要同时改系统中的所有应用。

数据存储与数据库 Java核心技术 性能 SQL 同步 字符集 binlog

Redis内核基于时间点的备份恢复和基于AOF日志的增量同步机制设计

11月30日云栖社区在线培训,阿里云资深开发工程师夏德军为大家带来阿里云Redis内核优化的分享。本文从两大方面介绍阿里云Redis服务,一是Redis内核支持基于时间点的备份恢复,一是Redis基于AOF日志的增量同步机制设计,并分别通过假设场景,详细的分析了备份恢复流程和AOF PSYNC流程。

云栖社区 redis 阿里云 日志 线程 配置 同步

MongoDB 3.4 复制集全量同步改进

3.2版本复制集同步的过程参考MongoDB 复制集同步原理解析 在 3.4 版本里 MongoDB 对复制集同步的全量同步阶段做了2个改进 在拷贝数据的时候同时建立所有的索引,在之前的版本里,拷贝数据时会先建立_id索引,其余的索引在数据拷贝完之后集中建立 在拷贝数据的同时,会把同步源上新产生的oplog拉取到本地local数据库的临时集合存储着,等数据全量拷贝完,直接读取本地临时集合的oplog来应用,提升了追增量的效率,同时也避免了同步源上oplog不足导致无法同步的问题。

MongoDB 性能 HTTPS 数据库 同步 aliyun 索引 存储 3.4 云数据库MongoDB版

8
GO