1. 云栖社区>
  2. 全部标签>
  3. #日志#
日志

#日志#

已有4人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

云掣日志产品专栏丨手把手教你如何挖掘日志数据“金矿”

云掣日志产品专栏 日志数据冗长杂乱,它的的价值在哪里? 企业信息安全与日志监控有什么联系? 日志大数据分析产品如何支撑企业战略转型? 云掣科技专注企业运维服务,先后为国内数十家大型龙头企业提供日志大数据分析产品方案及运维解决方案,积累了大量的实战经验,同时也在为客户服务的过程中,不断完善和升华自身的企业日志数据分析体系和实践方法论。

云栖社区 系统软件 数据存储与数据库 系统研发与运维 linux 安全 数据可视化 服务器 mysql 日志 数据库 数据分析 磁盘 大数据分析

如何打破边界,接入各家云,使用阿里云的数据产品作游戏数据分析?

背景:       某某游戏公司的业务逻辑图,其实可以从中发现这基本上跟大多数的游戏公司一样,通过阿里云作数据分析,其他云作数据接入。原因在于阿里云的数据产品比较贴合使用习惯、全面丰富的良好产品体验。       但是,接入的通路问题,采集问题,甚至集成问题,都是困扰一大部分用户的。这篇文章,就是希望打开这方面的脑洞。细化到网络层面,

数据存储与数据库 大数据 架构 分布式系统与计算 消息队列 数据可视化 日志 阿里技术协会 数据分析 数据中心 数据存储 海量数据

应用上云改造

1. 概述:       弹内应用使用的大量弹内基础设施在云上不存在或者有对应的产品,但是无法无缝上云需要改造,具体对应如下: 序号 弹内组件 云上 说明及注意事项 1  BUC-SSO aliyun RAM(OpenID)  云上可以使用 aliyun 的 ram 以及 openID 配置统一用户和单点登录应

日志 阿里技术协会 配置 metaq 容器 控制台 aliyun 云数据库 EDAS

通过Alibaba Cloud Log Log4j Appender采集日志到阿里云日志服务

Log4j是Apache的一个开放源代码项目,通过使用Log4j,您可以控制日志信息输送的目的地是控制台、文件、GUI组件、甚至是套接口服务器、NT的事件记录器、UNIX Syslog守护进程等;您也可以控制每一条日志的输出格式;通过定义每一条日志信息的级别,您能够更加细致地控制日志的生成过程。

云栖社区 java Cloud 日志 LOG 配置 logger aliyun xml class alibaba

初探MongoDB

MongoDB 日志 存储引擎

数据存储与数据库 MongoDB 日志 存储引擎

如何建设网络安全架构及防御措施?

在规划和构建网络信息系统的早期阶段,您需要规划系统的整体网络架构并创建网络拓扑图以满足您的业务需求,根据您的业务需求合理化网络区域划分,确定网络边界并降低系统风险。 网络架构是指对由计算机软硬件、互联设备等构成的网络结构和部署,用以确保可靠地进行信息传输,满足业务需要。

安全 网络安全 架构 日志 数据流 负载均衡 安全机制 数据备份 安全设置

MongoDB副本集同步原理

MongoDB的同步原理,官方文档介绍的比较少,网上资料也不是太多,下面是结合官方文档、网上资料和测试时候的日志,整理出来的一点东西。

MongoDB 日志 线程 同步

开发者说 | 分布式事务中间件 Seata 的设计原理

导读 微服务架构体系下,我们可以按照业务模块分层设计,单独部署,减轻了服务部署压力,也解耦了业务的耦合,避免了应用逐渐变成一个庞然怪物,从而可以轻松扩展,在某些服务出现故障时也不会影响其它服务的正常运行。

云栖社区 分布式 架构 性能 日志 LOG 模块 数据库 微服务 中间件

蚂蚁金服在云原生架构下的可观察性的探索和实践 | Meetup#3 回顾

随着应用架构往云原生的方向发展,传统监控技术已经不能满足云原生时代运维的需求,因此,可观察性的理念被引入了 IT 领域。下面我将会就可观察性在云原生的起源,可观察性发展动力,可观察性与监控的关系,可观察性的三大支柱,社区发展方向及产品现状,以及蚂蚁金服对相关问题的理解及实践进行探讨。

架构 监控 日志 微服务

cassandra启动过程介绍

cassandra启动流程 整个启动流程会启动前端cql server用来接收客户端cql请求,启动node互相通信用的MessageService。这个都是常规操作,就不花费篇幅赘述了。cassandra启动过程对于新节点加入还是正常启动还是有区分的,新节点会造成数据重分布,所以需要先执行bootstrap。

算法 日志 数据流 配置 集群 Image 数据迁移 node Server Cassandra bootstrap 启动

ACK容器服务虚拟节点使用阿里云日志服务来收集业务容器日志

按照这篇博文的介绍,可以在ACK集群上通过Helm的方式部署虚拟节点,提升集群的弹性能力。现在,通过虚拟节点部署的ECI弹性容器实例也支持将stdout输出、日志文件同步到阿里云日志服务(SLS)进行统一管理,所有日志能够被统一收集同一个日志服务project里面。

日志 LOG 配置 集群 容器 node 控制台 aliyun Bash ECI

唱吧基于 MaxCompute 的大数据之路

在使用 MaxCompute之前,唱吧使用自建体系来存储处理各端收集来的日志数据,包括请求访问记录、埋点数据、服务器业务数据等。但随着每天处理数据量的增长,积累的历史数据越来越多,来自其他部门同事的需求越来越复杂,自建体系逐渐暴露出了能力上的短板。

大数据 日志 Image 同步 云服务 离线计算 数据同步 自建机房 报表 数据统计 MaxCompute QuickBI

Mysql主从复制原理及搭建

MySQL主从复制的基础是主服务器对数据库修改记录二进制日志,从服务器通过主服务器的二进制日志自动执行更新。

架构 服务器 mysql 日志 LOG 数据库 配置 js 同步 aliyun 数据同步 replication

程序员面试备战篇:18个经典MySQL面试专题解析(干货分享答案)

欢迎关注专栏:Java架构技术进阶。里面有大量batj面试题集锦,还有各种技术分享,如有好文章也欢迎投稿哦。 微信公众号:慕容千语的架构笔记。欢迎关注一起进步。 1.数据库三范式是什么? 第一范式(1NF):字段具有原子性,不可再分。

编程语言 架构 java 服务器 mysql innodb 程序员 性能 日志 数据库 Cache 操作系统 HASH 索引 存储

"PostgreSQL 12: 新增 log_statement_sample_rate 参数控制数据库日志中慢SQL百分比"

PostgreSQL 提供的 log_min_duration_statement 参数设置后,数据库中执行时间超出设置值的SQL将记录到数据库中,此参数对所有库所有SQL都有效。维护PostgreSQL生产库时,数据库日志出现高频慢SQL实属正常,若其中一条比较繁忙的SQL若执行时间超过 log_min_duration_statement 设置值,那么数据库日志中将存在大量此条SQL的日志,这个日志量是很惊人的,多则一天上百GB。

性能优化 PostgreSQL SQL 日志 高可用 数据库 测试 Transaction 逻辑复制 分区表 并行查询 压力测试

省钱之道 | Web应用托管服务(Web+)隐藏的十个上云最佳姿势

随着云计算浪潮的推进,技术架构云化已经成为大势所趋。特别是最近由CNCF推动的云原生概念,将符合云原生标准的各种开源技术方案推向了前所未有的高度。在这一波浪潮的推动下,越来越多的企业开始了自身的数字化征程,逐步将自己的IT基础设施往云上迁移。

云栖社区 大数据 安全 架构 日志 高可用 基础设施 web 配置 集群 微服务 数据安全 主机 按量付费 slb

757
GO