阿里云存储服务 + 关注
手机版

高性能、高可用、免运维-云原生Prometheus方案与实践

SLS(阿里云日志服务)一直致力于发展成一个DevOps的数据中台,为用户提供丰富的机器数据接入、存储、分析、可视化等能力。本文主要介绍SLS如何支持Prometheus的方案,为大家提供云原生的高性能、高可用、免运维的Prometheus...

监控 SLS 高可用 配置 集群 Image aliyun 高性能 存储 github

SLS机器学习介绍:时序补点和版本比较

本次给大家介绍两个实用的函数:时序补点函数、异常对比函数; 一、时序补点函数 上图的中的指标说明 日志事件事件 T0 :日志产生的最早事件 日志事件事件 T1 :日志产生的最晚事件 实际点数据:在某个时刻有确定的数据 缺失点数据:在...

系统研发与运维 算法 函数 日志 SLS 集群 Image aliyun BY mean Group

Kubernetes 日志查询分析实践

本文将介绍如何基于日志服务实现对 Kubernetes(以下简称 K8s)日志的采集以及查询分析,此外,还附带了对 Ingress、Audit 方案的简要介绍。为了方便大家通过操作来加深理解,本文提供了详细的操作步骤以及对应截图和配置代码。

日志 日志服务 SLS 配置 集群 容器 large Logtail 控制台 aliyun kubernetes 日志采集 日志查询 ingress audit

Splunk基础

简介 Splunk是一个功能完备的企业级产品,提供了命令行窗口,web图形界面接口和其他接口,查询结果展示,数据查询,权限控制,分布式管理服务,数据索引,网络端口监听,数据警报,文件监听等等。 部署结构 一个典型的Splunk分布式部署分...

集群 Image 负载均衡 索引

史上最全“大数据”学习资源整理

史上最全“大数据”学习资源整理 2016-05-17 Hadoop技术博文   当前,整个互联网正在从IT时代向DT时代演进,大数据技术也正在助力企业和公众敲开DT世界大门。当今“大数据”一词的重点其实已经不仅在于数据规模的定义,它...

分布式 大数据 mysql hbase SQL Apache 数据库 数据仓库 集群 spark google 分布式文件系统 高性能 分布式数据库 bigdata

五个问答,告诉你阿里云对象存储如何助力钉钉战胜业务洪峰

为了积极迎接此次疫情的挑战,政府组织、企业、院校等纷纷开启了线上办公,视频会议、在线教育以及基于互联网的数据分析已然成为当下最重要的刚需。在这样如此巨大的业务流量和数据增量的压力下,钉钉是如何积极应对,从而实现存储的快速扩容,保障了业务连续...

OSS 互联网 集群 云存储 钉钉 问答 对象存储 容灾 数据中心 带宽 移动互联网 存储 海量数据

[New Feature]阿里云云盘支持BYOK加密

1.云盘加密介绍     当前阿里云云盘提供KMS加密方案,您除了可以使用默认服务密钥外,还可以使用事先在KMS服务中创建好的CMK进行加密。整个云盘加密过程都是在ECS端完成,可确保静态数据安全以及ECS实例与后端块存储集群之间传输数据...

云栖社区 安全与风控 linux python 安全 算法 加密 ECS 集群 系统盘 数据安全 Image 云盘 控制台 安全问道

系列文章:Kubernetes日志采集最佳实践

在Kubernetes中,日志采集和普通虚拟机的方式有很大不同,相对实现难度和部署代价也略大,但若使用恰当则比传统方式自动化程度更高、运维代价更低。本期将为大家介绍如何正确的进行Kubernetes的日志采集。

云栖社区 最佳实践 日志 配置 集群 容器 Image Logtail kubernetes k8s 日志采集

Kubernetes Ingress日志分析入门

本文主要介绍如何基于日志服务构建Kubernetes Ingress日志分析平台,并提供一些简单的动手实验方便大家快速了解日志服务相关功能。

监控 日志 分析 日志服务 配置 集群 容器 Image cdn kubernetes k8s 日志分析 日志采集 ingress

阿里PB级Kubernetes日志平台建设实践

将在QCon上分享的《阿里PB级Kubernetes日志平台建设实践》整理出来,分享给大家。

配置 集群 容器 Image cdn 数据采集 kubernetes k8s 日志分析

AI赋能DevOps:数据驱动的全栈工程师实践

DevOps是什么? 对于传统的软件研发而言,开发,测试,运维,运营,有不同的岗位进行分工协作,以保证质量和专业度,同一件事情,依赖不同岗位的排期、沟通、协调,效率难免会有打折。而对于互联网业务来说,快速的迭代,对人力的需求非常强烈,不...

算法 日志 集群 Image devOps AI 数据中台

CDH在云上利用文件存储HDFS实现存储计算分离

阿里云文件存储HDFS服务是阿里云专门针对先进的存储计算分离架构下的大数据分析场景定制推出的文件存储服务。文件存储HDFS采用全自研的底层架构,有效规避了开源HDFS系统的诸多短板,并提供标准的HDFS访问协议,用户无需对现有大数据分析应用...

架构 hdfs hadoop 性能 配置 集群 测试 spark 分布式文件系统 离线分析 存储 cloudera 存储计算分离

Tablestore+Delta Lake(快速开始)

本文介绍如何在E-MapReduce中通过Tablestore Spark Streaming Source将TableStore中的数据实时导入到Delta Lake中。 背景介绍 近些年来HTAP(Hybrid transactio...

TableStore hadoop 集群 主机 同步 spark aliyun e-mapreduce EMR 数据同步 表格存储 source 数据湖 deltalake

通过EMR Spark Streaming实时读取Tablestore数据

本文将介绍如何在E-MapReduce中实时流式的处理Tablestore中的数据。 场景设计 随着互联网的发展,企业中积累的数据越来越多,数据的背后隐藏着巨大的价值,在双十一这样的节日中,电子商务企业都会在大屏幕上实时显示订单总量,由...

TableStore hadoop 集群 主机 spark aliyun e-mapreduce string EMR type sparkstreaming datasource 通道服务

结构化大数据分析平台设计

## 前言  任何线上系统都离不开数据,有些数据是业务系统自身需要的,例如系统的账号,密码,页面展示的内容等。有些数据是业务系统或者用户实时产生的,例如业务系统的日志,用户浏览访问的记录,系统的购买订单,支付信息,会员的个人资料等。

分布式 大数据 Java核心技术 架构 分布式系统与计算 hbase hdfs 阿里技术协会 数据处理 数据库 集群 大数据分析 计算平台 分析平台

如何在Linux上挂载OSS Bucket

阿里云OSS存储是由阿里云提供的高可用,大容量的对象存储系统,用户使用OSS来存储图片,视频,日志和其它的静态的数据文件。而很多用OSS存放文件的用户都希望能够在ECS或者线下的环境中直接挂载访问OSS中的数据。

linux OSS 性能 配置 集群 云存储 主机 Image 同步 控制台 对象存储 NFS 存储

GitOps 初探

GitOps 的概念最初来源于 Weaveworks 的联合创始人 Alexis 在 2017 年 8 月发表的一篇博客 GitOps - Operations by Pull Request。文章介绍了 Weaveworks 的工程师如何...

安全 镜像 集群 持续集成 持续交付 git devOps Blog kubernetes 云原生 IaC CICD GitOps 声明式

【New Feature】阿里云快照服务技术解析

一、背景   目前上云已经成为行业发展趋势,越来越多的企业级客户将业务系统和数据库迁移到云上。而传统的备份一体机/备份软件方式,并不适合云上ECS、RDS等产品的备份与容灾服务。阿里云块存储服务提供云原生的快照服务,通过针对关键业务系统的...

云栖社区 nginx 安全与风控 数据存储与数据库 python faq 加密 镜像 集群 系统盘 数据迁移 云盘 多线程 数据库迁移 安全问道

为数据计算提供强力引擎,阿里云文件存储HDFS v1.0公测发布

在2019年3月的北京云栖峰会上,阿里云正式推出全球首个云原生HDFS存储服务—文件存储HDFS,为数据分析业务在云上提供可线性扩展的吞吐能力和免运维的快速弹性伸缩能力,降低用户TCO。阿里云文件存储HDFS的发布真正解决了HDFS文件系统...

大数据 hdfs hadoop 性能 集群 云存储 Image 弹性伸缩 spark EMR 分布式文件系统 离线分析 存储 文件存储 存储计算分离

3
GO
更多>
日志 aliyun 日志服务 存储 配置 OSS Image 数据存储与数据库 云栖社区 控制台 表格存储 SLS html 架构 对象存储 大数据 函数 LOG 日志分析 索引 服务器 云存储 TableStore 监控 性能 Logtail 安全 分布式系统与计算 SQL 分布式 数据库 阿里云 阿里技术协会 python 云存储技术 数据存储 HTTPS 集群 同步 java string 数据加工 解决方案 ots ECS NOSQL Json 钉钉 报表 容器 高可用 windows 流计算 文件存储服务 etl 数据迁移 安全与风控 日志采集 云存储网关 云盘 mysql kubernetes 算法 NAS 加密 互联网产品及应用 数据采集 nginx sdk Group 文件存储 负载均衡 k8s linux cdn 运营 高性能 正则表达式 消息服务 数据中心 数据处理 容灾 MNS API request Server 数据同步 电商 日志处理 数据分析 域名 最佳实践 云栖大会 系统研发与运维 物联网 数据备份 http 数组 数据安全 github 消息系统 备份 index 测试 工单 插件 数据管理 消息队列 分布式存储 docker 模块 对象存储OSS 线程 service RAM loghub spark shell 前端与交互设计 syslog 基础设施 安全问道 海量数据 高并发 移动开发与客户端 hbase 镜像 serverless 混合云存储 MaxCompute BY 带宽 stream 浏览器 type 帮助 性能优化 机器学习 云服务 可视化 磁盘 hadoop 公共云 用户体验 workshop NFS web 数据类型 TSDB 数据仓库 IOT timestamp 多线程 schema 互联网 js 弹性伸缩 test hdfs 脚本 csv faq Apache 系统软件 身份认证 微服务 弹性扩展 VPC url 主机 分布式文件系统 异地 kafka 访问日志 source 按量付费 深度学习 CLI 排序 Java核心技术 IIS 查询分析 logger Blink 飞天 DDOS php Elasticsearch 常见问题 devOps google 公共云 发布 RDS DNS 混合云备份 归档存储 混合云 demo 网络安全 slb 分布式系统 离线分析 android ATA 表达式 STS trace VMWare 大数据分析 兼容性 Bash Access 函数计算 根目录 时序 EMR file logstash 实时系统 系统盘 采集 Office 序列 多元索引 挂载OSS ossimport 大数据安全 云服务器ECS logging 态势感知 数据盘 轨迹 flink 人工智能 网络与数据通信 smb 客服 big OSS挂载 Feed流 data 日志收集 im 持续集成 分析 云原生 金融云