数据中台之结构化大数据存储设计

发布时间：2019-08-21 09:41:02 浏览：12438 回帖 ：4

对数据系统核心组件进行拆解，介绍每个组件下对应的开源组件以及云上产品。

大数据 架构 分布式系统与计算 NOSQL TableStore hbase 数据库 索引 离线计算 数据同步 存储 数据存储 流计算

MongoDB sharding 集合不分片性能更高？

发布时间：2019-07-10 11:49:15 浏览：12082 回帖 ：1

最近云上用户用户遇到一个 sharding 集群性能问题的疑惑，比较有代表性，简单分享一下 测试配置 mongos x 2、shard x 3 测试1：集合不开启分片，批量 insert 导入数据...

数据存储与数据库 MongoDB 性能 集群 测试 qps Server CPU

现代IM系统中的消息系统架构 - 模型篇

发布时间：2019-05-08 10:44:06 浏览：6078 回帖 ：1

前言 在架构篇中我们介绍了现代IM消息系统的架构，介绍了Timeline的抽象模型以及基于Timeline模型构建的一个支持『消息漫游』、『多端同步』和『消息检索』多种高级功能的消息系统...

消息系统 大数据 架构 NOSQL TableStore 同步 索引 ots index 表格存储

现代IM系统中的消息系统架构 - 架构篇

发布时间：2019-04-15 16:27:41 浏览：12530 回帖 ：3

前言 IM全称是『Instant Messaging』，中文名是即时通讯。在这个高度信息化的移动互联网时代，生活中IM类产品已经成为必备品，比较有名的如钉钉、微信、QQ等以IM为核心功能的产品。当然...

分布式 消息系统 大数据 架构 消息队列 NOSQL TableStore 服务器 排序 ots 表格存储 即时通讯 消息 社交 Feeds流

表格存储TableStore2.0重磅发布，提供更强大数据管理能力

发布时间：2019-03-08 16:40:36 浏览：3140 回帖 ：1

表格存储TableStore通过同时提供具象和抽象的数据模型，来满足不同核心数据场景的要求，更贴近业务抽象；提供多元化索引（全局二级索引和多元索引）来满足不同类型场景条件查询需求；提供全新的实时数据通...

数据存储与数据库 消息系统 大数据 架构 云存储技术 消息队列 NOSQL TableStore 阿里技术协会 数据处理 同步 ots 表格存储 数据存储 BigTable

Netflix Media Database - 架构设计和实现

发布时间：2019-01-12 12:08:44 浏览：2147 回帖 ：0

前言 前面一文主要讲了NMDB的起源、业务场景以及Media Document数据模型，而本节主要讲述NMDB的系统架构、核心模块以及底层技术。在深入了解其架构之前，我们先要明确NMDB的定位和功能...

大数据 架构 算法 TableStore 人工智能 索引 Cassandra 数据节点 Elasticsearch schema 表格存储 database service 存储 数据存储

Netflix Media Database - 起源和数据模型

发布时间：2019-01-12 12:02:36 浏览：5695 回帖 ：0

前言 Netflix（美国最大的PGC视频内容商）在18年下半年陆续发了几篇文章来讲述他们内部的NMDB系统的设计和实现，NMDB的全称是Netflix Media Database，用于解决Net...

大数据 算法 NOSQL TableStore 人工智能 个性化推荐 用户体验 索引 schema 表格存储 database 存储 数据存储 工作流 字幕

9.20 杭州云栖CloudLab：环境准备

发布时间：2018-09-18 21:21:45 浏览：1767 回帖 ：1

CloudLab场景介绍 随着信息化的发展，企业每天会产生各式各样的结构化，半结构化的数据。如何高效低成本的存储和处理这些数据，如何充分发挥数据的价值是企业普遍面临的挑战。今天的CloudLab，会...

云栖社区 系统软件 编程语言 数据存储与数据库 linux 分布式 消息系统 大数据 jvm 云栖大会

TableStore时序数据存储 - 架构篇

发布时间：2018-07-31 23:21:05 浏览：6642 回帖 ：1

分布式 架构 监控 NOSQL TableStore hbase 数据库 索引 ots 表格存储 数据存储 时序数据 TSDB TimeSeries 时序

TableStore数据模型 - WideColumn和Timeline

发布时间：2018-07-31 23:07:36 浏览：7540 回帖 ：0

前言 TableStore是阿里云自研的一款分布式NoSQL数据库，提到NoSQL数据库，现在对很多应用研发来说都已经不再陌生。当前很多应用系统底层不会再仅仅依赖于关系型数据库，而是会根据不同的...

数据存储与数据库 分布式 消息系统 架构 消息队列 NOSQL TableStore hbase 数据库 API ots stream 物联网 表格存储

时间序列数据的存储和计算 - 开源时序数据库解析（四）

发布时间：2018-01-13 12:05:47 浏览：6414 回帖 ：0

Prometheus 开源时序数据库解析的系列文章在之前已经完成了几篇，对比分析了Hbase系的OpenTSDB、Cassandra系的KairosDB、BlueFlood及Heroic，最后是...

NOSQL TableStore 数据库 索引 ots 表格存储 存储 数据存储 时序数据库

现代IM系统中消息推送和存储架构的实现

发布时间：2017-11-16 23:27:23 浏览：32685 回帖 ：3

前言 IM全称是『Instant Messaging』，中文名是即时通讯。在这个高度信息化的移动互联网时代，生活中IM类产品已经成为必备品，比较有名的如钉钉、微信、QQ等以IM为核心功能的产品。当然...

分布式 消息系统 架构 TableStore hbase HTTPS 数据库 高并发 钉钉 同步 string 表格存储 存储 即时通讯 im

时间序列数据的存储和计算 - 开源时序数据库解析（三）

发布时间：2017-08-03 19:49:32 浏览：10611 回帖 ：0

InfluxDB在DB-Engines的时序数据库类别里排名第一，实至名归，从它的功能丰富性、易用性以及底层实现来看，都有很多的亮点，值得大篇幅来分析。

NOSQL TableStore levelDB 数据库 索引 ots 物联网 IOT 表格存储 存储 时序数据 车联网 TSDB TimeSeries 时序

日志系列--程序日志处理挑战与方案

发布时间：2017-07-11 15:31:37 浏览：7241 回帖 ：1

程序日志（AppLog）有什么特点？ * 内容最全：程序日志是由程序员给出，在重要的地点、变量数值以及异常都会有记录，可以说线上90%以上Bug都是依靠程序日志输出定位到 * 格式比较随意...

服务器 HTTPS 日志 http 模块 容器 Image aliyun google html 存储 ATA 日志处理 程序日志 挑战

时间序列数据的存储和计算 - 开源时序数据库解析（二）

发布时间：2017-06-19 21:06:31 浏览：13878 回帖 ：1

KairosDB   KairosDB最初是从OpenTSDB 1.x版本fork出来的一个分支，目的是在OpenTSDB的代码基础上进行二次开发来满足新的功能需求。其改造之一就是支持可插拔式的存储...

分布式 架构 监控 TableStore hbase 数据库 索引 ots 物联网 IOT 表格存储 存储 时序数据库 车联网 TSDB

时间序列数据的存储和计算 - 开源时序数据库解析（一）

发布时间：2017-06-15 20:42:32 浏览：17421 回帖 ：3

开源时序数据库   如图是17年6月在db-engines上时序数据库的排名，我会挑选开源的、分布式的时序数据库做详细的解析。前十的排名中，RRD是一个老牌的单机存储引擎，Graphite底层是...

分布式 监控 TableStore hbase 数据库 APM ots 物联网 表格存储 存储 时序数据库 时序数据 车联网 TSDB TimeSeries

时间序列数据的存储和计算 - 概述

发布时间：2017-06-15 20:07:13 浏览：17696 回帖 ：5

什么是时间序列数据   什么是时间序列（Time Series，以下简称时序）数据？从定义上来说，就是一串按时间维度索引的数据。用描述性的语言来解释什么是时序数据，简单的说，就是这类数据描述了某个被...

监控 TableStore 阿里云 数据库 高并发 APM ots 物联网 表格存储 存储 时序数据库 时序数据 车联网 TSDB TimeSeries