1. 云栖社区>
  2. 全部标签>
  3. #日志#
日志

#日志#

已有3人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

关于K8s集群器日志收集的总结

本文介绍了kubernetes官方提供的日志收集方法并介绍了Fluentd日志收集器并与其他产品做了比较。最后介绍了好雨云帮如何对k8s进行改造并使用ZeroMQ以消息的形式将日志传输到统一的日志处理中心。

架构 docker 性能 日志 配置 集群 agent 容器 Elasticsearch volume 插件 k8s

一张图读懂Kubernetes监控与日志

12月2日,时速云应邀参加了清华毛豆网主办的K8S主题技术沙龙,售前工程师赵宇就《Kubernetes监控与日志》做了主题分享。 为了解救懒癌晚期患者,以下是小编为大家整理的分享内容,已将精华浓缩在一张图上~ Tips: 关注时速云公众号(tenxcloud2),回复 “1207”即可下载现场PPT。

分布式 监控 日志 集群 可扩展性 容器 Elasticsearch 分布式存储 插件 存储 k8s

关于k8s集群容器日志收集的总结

容器日志存在形式 目前容器日志有两种输出形式: 1、 stdout,stderr标准输出 这种形式的日志输出我们可以直接使用docker logs查看日志,k8s集群中同样集群可以使用kubectl logs类似的形式查看日志。

架构 docker 性能 日志 配置 集群 agent 容器 Elasticsearch volume 插件 k8s

Kubernetes中Logtail日志采集CRD配置详解

日志采集配置默认支持控制台配置方式,同时针对Kubernetes微服务开发模式,我们还提供CRD的配置方式,您可以直接使用kubectl对配置进行管理。 我们推荐使用CRD方式进行采集配置管理,该方式与Kubernetes部署、发布流程的集成更加完善。

docker 日志 LOG 配置 容器 Logtail 正则表达式 控制台 metadata plugin file type input k8s

基于容器服务的持续集成与云端交付(二)- 多维度打磨交付能力

前言 在上一篇中,和大家一起讨论了传统软件交付的问题、持续交付的难点、以及为什么云端的容器交付可以协助大家快速的持续交付。 但是当真正的将一个系统通过云端容器交付的时候会发现不能单纯的将Docker作为一种交付工具来对待,更多的时候是作为一个交付平台的基础设施来看待,还需要关心的是使用Docker后网络、存储、安全、性能、监控等等不同方面带来的变革。

安全 架构 监控 docker 性能 日志 软件架构 集群 持续集成 主机 容器 弹性伸缩 持续交付 API k8s

使用EFK收集Kubernetes多集群日志

使用EFK收集Kubernetes多集群日志 Collecting logs for multi kubernetes clusters with EFK 在有多个集群的情况下,一个集群就搭建一套日志收集分析服务实在太浪费。

docker 日志 LOG 配置 镜像 集群 HASH Elasticsearch k8s

工作日志——基于k8s搭建spark集群

使用k8s搭建spark集群 这几天尝试在k8s中搭建spark集群,踩了一些坑,跟大家分享一下。 Spark的组件介绍可参考官方文档 大数据生态圈简介可参考这篇文章 基于k8s官方示例 具体参考github k8s FAQ 镜像拉取问题 该方法需要访问gcr.

大数据 日志 镜像 集群 spark index metadata service k8s

Rust 开发 PostgreSQL 存储过程中日志的打印

可以直接使用 Rust 的标准宏来打印: eprintln!("test_sql_speed: {:?}", difference); 会打印到 PostgreSQL 的 STDERR 中。 如果没有开启 PostgreSQL 的日志转储功能的话,默认就打到: /var/log/postgresql/ 目录下的日志文件里去了。

PostgreSQL 日志 LOG swift 存储过程 Bash Rust

k8s的部署

k8s集群解决的问题 Docker之间跨节点的通讯 动态管理集群负载,使集群工作在期望的状态 集群之间资源的调度 集群的运行方式 k8s的节点类型 master节点负责整个集群的控制和管理 node节点是负载节点,运行pod。

docker 日志 yum 配置 镜像 集群 容器 centos node service k8s

(Kubernetes)k8s和docker的关系

Kubernetes 是一个自动化部署、伸缩和操作应用程序容器的开源平台。 使用 Kubernetes,你可以快速、高效地满足用户以下的需求: 快速精准地部署应用程序 即时伸缩你的应用程序 无缝展现新特征 限制硬件用量仅为所需资源 我们的目标是培育一个工具和组件的生态系统,以减缓在公有云或私有云中运行的程序的压力。

分布式 架构 监控 docker 日志 公共云 镜像 集群 PaaS 容器 google 存储 k8s

从零开始搭建K8S--如何监控K8S集群日志

架构选择(ELK VS EFK) ELK 我们首先介绍一下传统的日志监控方案。其中,ELK Stack 是我们最熟悉不过的架构。所谓ELK,分别指Elastic公司的Elasticsearch、Logstash、Kibana。

架构 监控 docker 日志 path 集群 容器 logstash Elasticsearch metadata k8s

构建与定制:唯品会PaaS基于Kubernetes的实践

主要工作内容包括:平台DevOps方案流程优化,持续部署,平台日志收集,Docker以及Kubernetes研究。 大家好,我是唯品会PaaS团队的王成昌,与大家分享一下PaaS在Kubernetes的实践。

监控 docker 域名 日志 镜像 持续集成 PaaS 容器 测试 node pipeline service jenkins k8s

Kubernetes 集群资源的那些事

大多数时候,我们在跟 K8S 玩耍的时候,主要目的就是:“把 XXX 打个镜像,在集群上跑起来 ——— 诶快看,真的跑起来了嘿!”。 Kubernetes 和 Docker 的缺省配置,就能够帮我们省却很多麻烦。

深度学习 日志 集群 容器 node volume CPU 磁盘 存储 k8s

使用Logstash收集Kubernetes的应用日志

前言 本文同步更新到Github仓库kubernetes-handbook中。 很多企业内部都有自己的ElasticSearch集群,我们没有必要在kubernetes集群内部再部署一个,而且这样还难于管理,因此我们考虑在容器里部署logstash收集日志到已有的ElasticSearch集群中。

日志 LOG 配置 镜像 集群 容器 测试 logstash Elasticsearch metadata k8s

使用Filebeat收集Kubernetes的应用日志

前言 在进行日志收集的过程中,我们首先想到的是使用Logstash,因为它是ELK stack中的重要成员,但是在测试过程中发现,Logstash是基于JDK的,在没有产生日志的情况单纯启动Logstash就大概要消耗500M内存,在每个Pod中都启动一个日志收集组件的情况下,使用logstash有点浪费系统资源,经人推荐我们选择使用Filebeat替代,经测试单独启动Filebeat容器大约会消耗12M内存,比起logstash相当轻量级。

日志 LOG 配置 镜像 集群 容器 测试 logstash metadata k8s

Kubernetes在微服务化游戏中的探索实践

首先来看下微服务化游戏容器化探索之路 随着docker技术在近几年的快速发展,国内外掀起了一股容器之风。而我们也在这时,开启了游戏容器化的探索之路。最开始在docker容器的应用上,还是以VM的模式去部署,毕竟游戏是非常复杂的应用,没有统一的模式。

域名 性能 日志 模块 集群 容器 Image 弹性伸缩 负载均衡 k8s

在 Kubernetes 中使用 Fluent Bit 进行日志采集

Fluent Bit 和 Fluentd 一样,是 Treasure Data 资助的采集工具,二者对比如下: Fluentd FluentBit 范围 服务器 嵌入设备和 IoT 设备 内存 约 20 MB 约 150 KB 语言 C 和 Ruby C 性能 高 高 依赖 以 Ruby Gem 构建,依赖一系列的 Gem 零依赖,可能有些插件会有依赖。

日志 集群 插件 Create metadata service account k8s

Kubernetes1.7 新特性:日志审计变化

背景概念 出于安全方面的考虑,Kubernetes提供了日志审计记录,用来记录不同普通用户、管理员和系统中各个组件的日志信息。 Kubernetes日志审计是Kube-apiserver组件的一部分功能,通过日志审计来记录apiserver上面所有请求处理过程。

日志 配置 metadata Group k8s

720
GO