数据中台之结构化大数据存储设计

发布时间：2019-08-21 09:41:02 浏览：13921 回帖 ：4

对数据系统核心组件进行拆解，介绍每个组件下对应的开源组件以及云上产品。

大数据 架构 分布式系统与计算 NOSQL TableStore hbase 数据库 索引 离线计算 数据同步 存储 数据存储 流计算

MongoDB sharding 集合不分片性能更高？

发布时间：2019-07-10 11:49:15 浏览：12686 回帖 ：1

最近云上用户用户遇到一个 sharding 集群性能问题的疑惑，比较有代表性，简单分享一下 测试配置 mongos x 2、shard x 3 测试1：集合不开启分片，批量 insert 导入数据...

数据存储与数据库 MongoDB 性能 集群 测试 qps Server CPU

现代IM系统中的消息系统架构 - 模型篇

发布时间：2019-05-08 10:44:06 浏览：8201 回帖 ：1

前言 在架构篇中我们介绍了现代IM消息系统的架构，介绍了Timeline的抽象模型以及基于Timeline模型构建的一个支持『消息漫游』、『多端同步』和『消息检索』多种高级功能的消息系统...

消息系统 大数据 架构 NOSQL TableStore 同步 索引 ots index 表格存储

现代IM系统中的消息系统架构 - 架构篇

发布时间：2019-04-15 16:27:41 浏览：16365 回帖 ：4

前言 IM全称是『Instant Messaging』，中文名是即时通讯。在这个高度信息化的移动互联网时代，生活中IM类产品已经成为必备品，比较有名的如钉钉、微信、QQ等以IM为核心功能的产品。当然...

分布式 消息系统 大数据 架构 消息队列 NOSQL TableStore 服务器 排序 ots 表格存储 即时通讯 消息 社交 Feeds流

表格存储TableStore全新升级，打造统一的在线数据存储平台！

发布时间：2019-03-08 19:45:56 浏览：3082 回帖 ：0

表格存储TableStore是阿里云自研的面向海量结构化和半结构化数据存储的Serverless NoSQL多模型数据库，被广泛用于社交、物联网、人工智能、元数据和大数据等业务场景。表格存储Table...

消息系统 大数据 架构 消息队列 NOSQL TableStore hbase 数据处理 同步 ots 表格存储 数据存储 BigTable

表格存储TableStore2.0重磅发布，提供更强大数据管理能力

发布时间：2019-03-08 16:40:36 浏览：3626 回帖 ：1

表格存储TableStore通过同时提供具象和抽象的数据模型，来满足不同核心数据场景的要求，更贴近业务抽象；提供多元化索引（全局二级索引和多元索引）来满足不同类型场景条件查询需求；提供全新的实时数据通...

数据存储与数据库 消息系统 大数据 架构 云存储技术 消息队列 NOSQL TableStore 阿里技术协会 数据处理 同步 ots 表格存储 数据存储 BigTable

Netflix Media Database - 架构设计和实现

发布时间：2019-01-12 12:08:44 浏览：2425 回帖 ：0

前言 前面一文主要讲了NMDB的起源、业务场景以及Media Document数据模型，而本节主要讲述NMDB的系统架构、核心模块以及底层技术。在深入了解其架构之前，我们先要明确NMDB的定位和功能...

大数据 架构 算法 TableStore 人工智能 索引 Cassandra 数据节点 Elasticsearch schema 表格存储 database service 存储 数据存储

Netflix Media Database - 起源和数据模型

发布时间：2019-01-12 12:02:36 浏览：5995 回帖 ：0

前言 Netflix（美国最大的PGC视频内容商）在18年下半年陆续发了几篇文章来讲述他们内部的NMDB系统的设计和实现，NMDB的全称是Netflix Media Database，用于解决Net...

大数据 算法 NOSQL TableStore 人工智能 个性化推荐 用户体验 索引 schema 表格存储 database 存储 数据存储 工作流 字幕

9.20 杭州云栖CloudLab：环境准备

发布时间：2018-09-18 21:21:45 浏览：2157 回帖 ：1

CloudLab场景介绍 随着信息化的发展，企业每天会产生各式各样的结构化，半结构化的数据。如何高效低成本的存储和处理这些数据，如何充分发挥数据的价值是企业普遍面临的挑战。今天的CloudLab，会...

云栖社区 系统软件 编程语言 数据存储与数据库 linux 分布式 消息系统 大数据 jvm 云栖大会

TableStore时序数据存储 - 架构篇

发布时间：2018-07-31 23:21:05 浏览：7988 回帖 ：1

分布式 架构 监控 NOSQL TableStore hbase 数据库 索引 ots 表格存储 数据存储 时序数据 TSDB TimeSeries 时序

TableStore数据模型 - WideColumn和Timeline

发布时间：2018-07-31 23:07:36 浏览：10941 回帖 ：0

前言 TableStore是阿里云自研的一款分布式NoSQL数据库，提到NoSQL数据库，现在对很多应用研发来说都已经不再陌生。当前很多应用系统底层不会再仅仅依赖于关系型数据库，而是会根据不同的...

数据存储与数据库 分布式 消息系统 架构 消息队列 NOSQL TableStore hbase 数据库 API ots stream 物联网 表格存储

Lucene解析 - IndexWriter

发布时间：2018-04-17 15:39:47 浏览：7630 回帖 ：2

前言 在上一篇文章我们介绍了Lucene的基本概念，在本篇文章我们将深入Lucene中最核心的类之一IndexWriter，来探索Lucene中数据写入和索引构建的整个过程。   IndexWr...

Java核心技术 搜索 线程 阿里技术协会 配置 ADD 索引 多线程 Elasticsearch update Commit lucene

Lucene解析 - 基本概念

发布时间：2018-04-09 18:54:25 浏览：3544 回帖 ：0

前言 Apache Lucene是一个开源的高性能、可扩展的信息检索引擎，提供了强大的数据检索能力。Lucene已经发展了很多年，其功能越来越强大，架构也越来越精细。它目前不仅仅能支持全文索引，也能...

java 阿里技术协会 数据库 索引 Elasticsearch index lucene 存储 数据类型

时间序列数据的存储和计算 - 开源时序数据库解析（四）

发布时间：2018-01-13 12:05:47 浏览：7341 回帖 ：0

Prometheus 开源时序数据库解析的系列文章在之前已经完成了几篇，对比分析了Hbase系的OpenTSDB、Cassandra系的KairosDB、BlueFlood及Heroic，最后是...

NOSQL TableStore 数据库 索引 ots 表格存储 存储 数据存储 时序数据库

现代IM系统中消息推送和存储架构的实现

发布时间：2017-11-16 23:27:23 浏览：35816 回帖 ：5

前言 IM全称是『Instant Messaging』，中文名是即时通讯。在这个高度信息化的移动互联网时代，生活中IM类产品已经成为必备品，比较有名的如钉钉、微信、QQ等以IM为核心功能的产品。当然...

分布式 消息系统 架构 TableStore hbase HTTPS 数据库 高并发 钉钉 同步 string 表格存储 存储 即时通讯 im

时间序列数据的存储和计算 - 开源时序数据库解析（三）

发布时间：2017-08-03 19:49:32 浏览：11961 回帖 ：0

InfluxDB在DB-Engines的时序数据库类别里排名第一，实至名归，从它的功能丰富性、易用性以及底层实现来看，都有很多的亮点，值得大篇幅来分析。

NOSQL TableStore levelDB 数据库 索引 ots 物联网 IOT 表格存储 存储 时序数据 车联网 TSDB TimeSeries 时序

日志系列--程序日志处理挑战与方案

发布时间：2017-07-11 15:31:37 浏览：8002 回帖 ：1

程序日志（AppLog）有什么特点？ * 内容最全：程序日志是由程序员给出，在重要的地点、变量数值以及异常都会有记录，可以说线上90%以上Bug都是依靠程序日志输出定位到 * 格式比较随意...

服务器 HTTPS 日志 http 模块 容器 Image aliyun google html 存储 ATA 日志处理 程序日志 挑战