5大架构:细数数据平台的组成与扩展

  1. 云栖社区>
  2. 大数据文摘>
  3. 博客>
  4. 正文

5大架构:细数数据平台的组成与扩展

小旋风柴进 2017-05-02 21:04:00 浏览1210
展开阅读全文

导读:One size does not fit all! 数据处理平台已不集中于传统关系型数据库,各种其他平台层出不穷,也各有其适用范围。


从哪些角度去理解各种数据处理平台的设计思想及发展演进呢?下面我们从几个角度讨论一下:


一、单机存储引擎设计(数据的位置)


从某种意义上说,当我们处理数据的时候,实际上是在管理数据的位置,管理数据在CPU的位置,数据相对其他数据的位置。CPU特别适合处理顺序性操作数据指令,这样他可以进行数据预取。但是随机读取操作使得预取功能几乎失效,好多预取到缓存、前端总线的数据都是无效的。


传统意义上说,磁盘的存取性能要弱于内存,但是要分随机存取及顺序存取不同的场景下讨论。在流式顺序处理场景,磁盘及SSD的读取速度已经超过内存随机读取速度。


我们如何尽量实现数据的顺序存取呢?让我们设计一个很简单的数据库开始,存取一个


































































































网友评论

登录后评论
0/500
评论
小旋风柴进
+ 关注
所属云栖号: 大数据文摘