作为互联网流量入口,CDN日志大数据你该怎么玩?

简介: CDN是非常重要的互联网基础设施,用户可以通过CDN,快速的访问网络中各种图片,视频等资源。在访问过程中,CDN会产生大量的日志数据,而随着如今越来越复杂的网络环境变化,和业务的迅速增长,日志数据变得更大量、更多维度,同时其稳定性和报警监控的要求越来越高。

CDN是非常重要的互联网基础设施,用户可以通过CDN,快速的访问网络中各种图片,视频等资源。在访问过程中,CDN会产生大量的日志数据,而随着如今越来越复杂的网络环境变化,和业务的迅速增长,日志数据变得更大量、更多维度,同时其稳定性和报警监控的要求越来越高。这些数据通常都与用户的下一步业务决策息息相关。

通过对CDN访问日志的分析,可以挖掘出大量有用的信息作为监控、报警、渠道分析、运营分析的数据来源。而对于技术或者运维人员来说,CDN的线上问题其实是不好排查的,因为节点遍布全球各地,我们没办获知各个节点的状态。

当前CDN厂商通常会提供离线日志的功能,会在几十分钟甚至几个小时之后提供访问日志给客户,存在两个问题,第一是延迟太长,无法满足大型活动等场景下的监控、报警、运营分析的需求;第二是这些日志经常存储在服务提供商处,不容易进行处理和消费;第三是日志也会有不定期的删除,例如常见的服务商一般提供一个月的日志,之前的记录就不会保存了。

那么针对于需要对CDN的日志进行实时分析、处理及归档等操作的用户来说,就会出现对于线上问题排查的不及时、CDN服务性能无法实时把握,遇到问题的灾备方案对客户端有感等问题。

综上所述,更实时地、详细地关注和分析日志的需求逐渐显露,但是普通用户对CDN日志进行实时、离线分析又并不容易,需要付出搭建、运维和管理成本,为了完成需求,有时还需要编写不少代码,但最终并不一定能得到很好的效果。整个CDN实时日志涉及的环节多,对服务质量也有严苛的要求,技术挑战比较大。

那么面对以上需求,阿里云CDN可以如何应对?为运维、技术人员提供更便捷、更智能、更实时有效地解决方案呢?

近期,阿里云CDN上线了实时日志服务,将日志服务(SLS)的能力打通,将CDN采集的实时日志,在小于60秒的时间内投递至日志服务,进行实时、交互式分析和报表呈现,提高数据的决策能力,助力用户将业务推向一个新的高度。

__meitu_1

为了让用户们更全面地了解CDN实时日志服务,并对业务赋能,在12月26日下午三点,云栖社区将举办CDN实时日志服务的在线直播发布会,首次进行全面、深度的产品解读。

发布会议程详情

15:00-15:25:《CDN实时日志技术解读》

CDN实时日志可以解决用户无数据、多种分析以及可视化等等需求,这个产品背后的技术挑战究竟有多大?它的系统架构是怎样演进的?阿里云在进行全球化服务的过程中,日志系统支持了监控、调度、计费及数据分析等多业务,那么全球海量日志采集的难点是什么?技术亮点是什么?它的性能、成本又是如何衡量?

分享嘉宾:阿里云高级技术专家 姜晓东

image

15:25-15:50:《阿里云CDN产品与实时日志业务详解》

阿里云CDN从2014年商业化至今,已经拥有1500+全球节点和120T带宽储备,今天CDN实时日志可以从全球多个区域、数万节点实时采集日志,通常延时不超过60秒,确保日志的实时价值。那么CDN实时日志源起何处?它解决了用户怎样的问题?拥有怎么样的特性?适合应用在什么场景中?有哪些客户已经在使用并且他们的使用体验如何?以及如何在控制台中开通及操作CDN实时日志?本次分享将会详细介绍。

分享嘉宾:阿里云CDN高级产品经理 容蓓

image

15:50-16:00:《优惠活动与提问互动》

点击进入直播间传送门

CDN实时日志服务介绍

image

技术红利来啦:12月26日至2月28日,CDN实时日志7折优惠,低至0.042元/万条欢迎大家开通与使用

目录
相关文章
|
4月前
|
定位技术 调度 UED
在进行CDN流量调度时,要考虑的因素有哪些?
在进行CDN流量调度时,要考虑的因素有哪些?
|
5月前
|
域名解析 缓存 网络协议
互联网并发与安全系列教程(04) - CDN内容分发
互联网并发与安全系列教程(04) - CDN内容分发
52 0
|
6月前
|
分布式计算 MaxCompute
在MaxCompute中,你可以使用OUTPUT语句将查询结果输出到日志文件中
在MaxCompute中,你可以使用OUTPUT语句将查询结果输出到日志文件中
30 1
|
7月前
|
消息中间件 分布式计算 大数据
大数据Spark实时搜索日志实时分析
大数据Spark实时搜索日志实时分析
137 1
|
7月前
|
分布式计算 自然语言处理 监控
大数据Spark对SogouQ日志分析
大数据Spark对SogouQ日志分析
189 0
|
3月前
|
canal 消息中间件 关系型数据库
大数据数据库增量日志采集之Canal
大数据数据库增量日志采集之Canal
|
4月前
|
消息中间件 大数据 Apache
【云计算与大数据技术】流计算讲解及集群日志文件实时分析实战(附源码)
【云计算与大数据技术】流计算讲解及集群日志文件实时分析实战(附源码)
43 1
|
4月前
|
存储 分布式计算 DataWorks
DataWorks如何同步SLS日志到odps上?
DataWorks如何同步SLS日志到odps上?
72 0
|
6月前
|
编解码 缓存 容灾
带你读《多媒体行业质量成本优化及容灾方案白皮书》2. CDN及直播出流量优化方案
带你读《多媒体行业质量成本优化及容灾方案白皮书》2. CDN及直播出流量优化方案
169 0
|
2月前
|
域名解析 网络协议 安全
阿里云CDN
本文介绍阿里云CDN产品中涉及的基本概念,便于您更准确地理解和使用CDN产品。
59 5

热门文章

最新文章