云HBase X-Pack解决传统数据仓库瓶颈,赋能客户计算分析业务

  1. 云栖社区>
  2. HBase+Spark社区>
  3. 博客>
  4. 正文

云HBase X-Pack解决传统数据仓库瓶颈,赋能客户计算分析业务

沐远 2019-02-26 11:19:42 浏览7639
展开阅读全文

  某游戏公司随着业务快速发展,用户行为日志快速增长,需要从海量的点击流日志和激活日志中挖掘数据的价值,比如广告转化率、激活率,每日安装用户成本等等。

业务挑战

  原来使用GreenPlum做实时计算和统计分析。但是GreenPlum存在以下缺陷,难以应对业务的快速发展:

  • GreenPlum架构难以应对日益复杂的计算任务;
  • Greenplum的单表分区数目有限制,同时多级分区支持不够友好,不适用单表数据量比较大且需要永久保存的日志,如果单个分区表数据量比较大的时候查询性能无法满足业务性能需求;
  • Greenplum扩容时由于数据要重分布会比较慢;
  • Greenplum不适合处理非结构化的数据。

解决方案

  在这样的背景下选择了阿里云HBase SQL服务(Phoenix)+ Spark服务构建实时计算和数据仓库解决方案,其中HBase SQL提供

网友评论

登录后评论
0/500
评论
沐远
+ 关注
所属云栖号: HBase+Spark社区