SLS机器学习介绍(01):时序统计建模

  1. 云栖社区>
  2. 阿里云存储服务>
  3. 博客>
  4. 正文

SLS机器学习介绍(01):时序统计建模

悟冥 2018-10-29 10:48:48 浏览6534
展开阅读全文

文章系列链接


背景

时序数据是业务监控中最多方法,双十一大盘、业务监控系统、系统性能平台等都可以看到他的身影。根据统计,60%+业务系统监控都是通过时序表达出来。在数量上,以在阿里云神农系统为例,一台机器有3500多个时序数据,以5秒作为采样周期1000台集群计算,每秒钟会产生70W个点。

时序数据从产生到看到一般分为几个阶段:

  1. 采集程序通过采样把原始的状态写入队列
  2. 流计算程序通过跳动窗口(分钟、15秒等)进行聚合(例如count,avg,p99)
  3. 写入NoSQL等存储引擎进行后期可视化与加工
    这套架构非常成熟,在集团中也有非常棒的产品例如I







网友评论

登录后评论
0/500
评论
悟冥
+ 关注
所属云栖号: 阿里云存储服务