阿里云NoSQL X-Pack如何做到在线存储及计算一体?

  1. 云栖社区>
  2. HBase+Spark社区>
  3. 博客>
  4. 正文

阿里云NoSQL X-Pack如何做到在线存储及计算一体?

云hbase+spark 2019-09-25 10:20:16 浏览1739
展开阅读全文

HBase用户福利

新用户9.9元即可使用6个月云数据库HBase,更有低至1元包年的入门规格供广大HBase爱好者学习研究,更多内容请参考链接

大数据处理的挑战

随着企业数据的逐渐积累增多,数据架构从单节点的关系型数据库,演进到分库分表,再演进到NoSQL及hadoop生态。hadoop生态百花齐放,没有统一的架构标准,目前用的比较多的是Lambda架构,该架构主要特点为流计算、批处理、在线存储独立的,通过pipline来连接。


c604a0501e462bcdfcad079498cfa04def5666a7.png

大数据Lambda架构比较复杂,流、批、在线存储需要独立建设,同时需要构建数据pipline来做数据交换流动。
  • 数据写入:批处理、流处理、在线存储需要分别写入数据。一方面流及批两层需要独立写入数据,同时很多大数据业务数据也会直接写入mongoDB、Cassandra、HBase、Redis等NoSQL系统这样的在

网友评论

登录后评论
0/500
评论
云hbase+spark
+ 关注
所属团队号: HBase+Spark社区