1. 聚能聊>
  2. 话题详情

一起来聊聊日志数据可视化

无论是在监控、DevOps还是Tracing等场景,日志的地位都极其重要,海量日志数据中蕴含着非常多的有用信息。数据可视化(Data Visualization)通过图像的方式直观清晰地将日志信息传达给运维人员和技术人员,近年来数据可视化越炒越热,日志数据可视化方案也越来越多,国外有大名鼎鼎的ELK中的Kibana、Splunk以及sumologic等,国内也有日志易等解决方案。

阿里云日志服务也提供了一整套的日志数据可视化方案,除了自带的仪表盘功能以外,还对接了JaegerGrafana、Tableua(JDBC)、DataV等可视化框架。

image

今天大家一起来聊一聊,在海量日志数据面前:
1.数据可视化的价值
2.你是如何做日志数据可视化的,把你的经验分享出来

参与话题

奖品区域 活动规则 已 结束

  • 奖品一

    阿里云代金券 x 5

  • 奖品二

    福禄寿淘公仔 x 1

  • 奖品三

    野营灯 x 1

43个回答

2

浮生递归 已获得阿里云代金券 复制链接去分享

1.数据可视化的价值
主要是增加数据可读性,然后顺带产生一堆其他相关的价值吧。比如更好的为决策者提供决策依据,降低分析数据的门槛等。像日志对于一般人而言,读起来是非常困难的。对专业人员来说,阅读也没多少效率。但是做了数据可视化后,就完全不一样了,数据越多,优势越明显。

2.你是如何做日志数据可视化的,把你的经验分享出来
楼主没提到Quick BI。阿里云除了DATA V外,QUICK BI也是个不错的数据可视化工具。
image

两者功能和使用场景上既有交集又有区别。QUICK BI因为成本较高,所以我没怎么使用。主要用DATAV来做数据可视化。毕竟,一年只要51元,能做5个实例,基本满足入门级的需求。比如用来做一个公益组织的数据分析和展示(未完成)。
image
DATA V更适合向外展示数据,比如大厅的显示屏甚至户外,还有各种媒体如电视上。QUICK BI则相反,是向内展示。比如给老板看报表时,或者自己组织内部做数据分析时,以及做文档时的数据需求,可以直接截图过来使用,方便快捷。

沐自 回复

赞,说得非常准确,dataV主要场景还是在大屏展示上,QuickBI更多的是在数据分析等场景。当然,阿里云日志服务也有对接QuickBI的解决方案

爱你一下 回复

阿里云这么注销不了啊

评论
1

kaliarch 已获得阿里云代金券 复制链接去分享

1.数据可视化的价值

在未来社会一切皆数据,能把纷繁复杂的大数据集、晦涩难懂的数据报告变轻松易读、亲切、易于理解,可视化显得尤为重要。
就拿目前最火的,大数据分析,可以实现精准营销可视化通过大数据分析和挖掘用户群的文化观念、消费收入、消费习惯、生活方式等数据,将用户群体划分为更加精细的类别,根据用户群的不同制定不同品牌推广战略和营销策略,提高用户的忠诚度、培养能为企业带来高价值的潜在客户,提升市场占有率。

2.你是如何做日志数据可视化的,把你的经验分享出来

目前公司内部在使用ELK,对elk进行了二次开发,用于分析各个数据中心上层网络设备的流量情况及利用echart绘图,可视化攻击配合waf,流量清洗实现自动封堵,保障大网通畅,在具体项目中使用elk监控各应用系统日志状态,可视化业务情况。

0

你懂的对吧 已获得阿里云代金券 复制链接去分享

"数据可视化"可以帮助用户理解数据,一直是热门方向。
图表是"数据可视化"的常用手段,其中又以基本图表----柱状图、折线图、饼图等等----最为常用。
用户非常熟悉这些图表,但如果被问道,它们的特点是什么,最适用怎样的场合(数据集)?恐怕答得上来的人就不多了。
有人觉得,基本图表太简单、太原始,不高端,不大气,因此追求更复杂的图表。但是,越简单的图表,越容易理解,而快速易懂地理解数据,不正是"数据可视化"的最重要目的和最高追求吗?
所以,请不要小看这些基本图表。因为用户最熟悉它们,所以只要是适用的场合,就应该考虑优先使用。

0

cjsoldier 已获得福禄寿淘公仔 复制链接去分享

1.数据可视化的价值
方便所有人快速增删改查。不仅仅是用户,开发人员也需要可视化。
可视化后可以对数据做进一步分析。当然是人工分析。更多的是排查错误。

2.你是如何做日志数据可视化的,把你的经验分享出来
直接基于Kibana做二次开发。后端存储采用ES。

0

aoteman675 已获得野营灯 复制链接去分享

1.数据可视化的价值
决策力,我们分析大数据最重要的是从海量数据中提取有价值的数据。例如消费大数据,对于商家就可以调整销售方向和产品指向。大屏展示可显示的数据量非常少,比如旅游大数据,就是一些热力图和旅游路线分析,但是后面的支撑数据是海量的,我们用DataV最重要的就是直观展现态势,从而影响决策部署。
2.你是如何做日志数据可视化的,把你的经验分享出来
我的APP数据分析展示就是用DataV做的,实时分析用户使用情况。活跃用户、流失用户,日活用户就能直观展示,让产品经理利用这些数据升级产品。

0

微wx笑 已获得阿里云代金券 复制链接去分享

1.数据可视化的价值
轻松快速地消化信息
紧密连接业务和行动
快速发现业务趋势
洞察业务变化背后的原因

2.你是如何做日志数据可视化的,把你的经验分享出来
利用 ELK系统分析Nginx日志并对数据进行可视化展示
ELK优势:
针对网络攻击事件时,方便运维人员查找溯源。
日志集中收集存储,方便后续分析
优化业务、系统时,做到有据可依

0

kissjz 已获得阿里云代金券 复制链接去分享

1.数据可视化的价值
比如说天猫双十一的大屏,那就是数据可视化的应用,图就不贴了,话题中有一张大屏的图了。
现在是大数据时代了,数据多得早就不能靠肉眼去查看,哪怕是用数据库处理,估计也会眼花缭乱,但数据可视化,就能让人直观的感受到数据变化和实时的动态,不仅数据分析师能更方便的进行数据分析,也能让非技术人员感受到数据的力量!

2.你是如何做日志数据可视化的,把你的经验分享出来
只用过阿里云的dataV制作过销售数据的可视化大屏,感觉效果非常好!很醒目,很直观的能感受到数据的变化趋势和关键信息的变动。

0

ap1253j8y 复制链接去分享

项目中用到了echart datav 体验过 弱弱的问一句 datax 3能开源么

沐自 回复

dataX相关的可以看一下:https://github.com/alibaba/DataX

评论
1

1488825634089167 复制链接去分享

1.数据可视化的价值
主要是增加数据可读性,然后顺带产生一堆其他相关的价值吧。比如更好的为决策者提供决策依据,降低分析数据的门槛等。像日志对于一般人而言,读起来是非常困难的。对专业人员来说,阅读也没多少效率。但是做了数据可视化后,就完全不一样了,数据越多,优势越明显。
2.你是如何做日志数据可视化的,把你的经验分享出来
楼主没提到Quick BI。阿里云除了DATA V外,QUICK BI也是个不错的数据可视化工具。

两者功能和使用场景上既有交集又有区别。QUICK BI因为成本较高,所以我没怎么使用。主要用DATAV来做数据可视化。毕竟,一年只要51元,能做5个实例,基本满足入门级的需求。比如用来做一个公益组织的数据分析和展示(未完成)。

DATA V更适合向外展示数据,比如大厅的显示屏甚至户外,还有各种媒体如电视上。QUICK BI则相反,是向内展示。比如给老板看报表时,或者自己组织内部做数据分析时,以及做文档时的数据需求,可以直接截图过来使用,方便快捷。

0

快递 复制链接去分享

你是如何做日志数据可视化的,把你的经验分享出来
用QUICK BI

luok 回复

elk

评论
1

1521220499541739 复制链接去分享

数据可视化是通过数学模型把大量人脑无法一次性解读的数据,变成人脑易于认知的可视图形,通过对图形的解读发现数据的规律,进而发现数据背后的影响因素。可视化只是手段,最终要落到那些发现的因素上,这才是真正的价值。

0

1346601511740077 复制链接去分享

热搜搜一下特女女徒弟

0

陌月丶孤烟 复制链接去分享

看着特爽

0

1206128071408271 复制链接去分享

你好

0

1488825634089167 复制链接去分享

1.数据可视化的价值
主要是增加数据可读性,然后顺带产生一堆其他相关的价值吧。比如更好的为决策者提供决策依据,降低分析数据的门槛等。像日志对于一般人而言,读起来是非常困难的。对专业人员来说,阅读也没多少效率。但是做了数据可视化后,就完全不一样了,数据越多,优势越明显。
2.你是如何做日志数据可视化的,把你的经验分享出来
楼主没提到Quick BI。阿里云除了DATA V外,QUICK BI也是个不错的数据可视化工具。

两者功能和使用场景上既有交集又有区别。QUICK BI因为成本较高,所以我没怎么使用。主要用DATAV来做数据可视化。毕竟,一年只要51元,能做5个实例,基本满足入门级的需求。比如用来做一个公益组织的数据分析和展示(未完成)。

DATA V更适合向外展示数据,比如大厅的显示屏甚至户外,还有各种媒体如电视上。QUICK BI则相反,是向内展示。比如给老板看报表时,或者自己组织内部做数据分析时,以及做文档时的数据需求,可以直接截图过来使用,方便快捷。

0

1714127750151161 复制链接去分享

追求高端文化平台服务

0

此人叫静慧 复制链接去分享

这个是需要付费购买的吗?

0

成功的我 复制链接去分享

谁来帮我

0

成功的我 复制链接去分享

我想和你们学习

0

1292226622541757 复制链接去分享

注册第一天!

3