阿里云存储服务 关注
手机版

【功能发布】日志服务Logtail 2018-08

  1. 云栖社区>
  2. 阿里云存储服务>
  3. 博客>
  4. 正文

【功能发布】日志服务Logtail 2018-08

元乙 2018-08-29 19:59:17 浏览522 评论1

摘要: 【功能发布】日志服务Logtail 2018-08

新功能

  • 插件输入新增syslog,支持rfc5424和rfc3164两种协议。
  • 插件数据处理新增processor_filter_key_regex,支持根据日志字段过滤日志。

功能优化

  • Logtail支持手动更新命令(upgrade),升级期间数据不丢失。
  • lumberjack插件支持SSL。
  • 容器数据采集支持_container_ip_
  • 优化容器数据采集中的_image_name_,将hash值改为可读的tag值。

问题修复

  • 容器stdout采集默认去除日志尾的'\n',改善可读性。
  • 优化容器数据采集策略,增加对Job型容器(启动后3秒内退出)的日志采集。
【云栖快讯】阿里云栖开发者沙龙(Java技术专场)火热来袭!快来报名参与吧!  详情请点击

网友评论

1F
1157827898168582

你好,我们的日志量比较大,预计在5000-1000条每秒,平均0.7KB每条,想上日志服务,但是领导比较担心logtail的资源占用,想问下这个量级下你们的CPU占用可以只占用单核吗,单核资源消耗是多少,另外想问下Logtail有cgroup限制吗

元乙

你们的日志量算起来不是很大,0.7 * 10000 也就7MB/s,如果你们日志只是每行采集上来(极简模式),也就会消耗10%左右的CPU。如果需要解析并上传,正则优化好一些也最多会占40%左右的CPU。内存比较低,也就几十M左右。
另外Logtail本身不带cgroup限制,Logtail本身就会限制资源,如果有需求你可以再加一层cgroup。
Logtail是目前已知的agent中性能最高的,阿里内部每秒几百兆的都可以搞定。具体可以加钉钉群咨询哈,群号 : 11775223

评论