1. 云栖社区>
  2. 全部标签>
  3. #数据采集#
数据采集

#数据采集#

已有2人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

轻松搞定实时分析及监控大屏

通过最佳实践帮助您实现上述案例效果 Step1:数据准备 数据格式如下: $remote_addr - $remote_user [$time_local] "$request" $status $body_bytes_sent"$http_referer" "$http_user_agent

监控 数据可视化 阿里云 RDS SQL 配置 agent 数加 logstash stream 数据采集 数据存储 流计算

Docker时代——如何实现日志数据一键上云

1 准备工作 1.1 开通MaxCompute服务 参考使用MaxCompute的准备工作 1.2 开通Datahub服务 进入Datahub Web控制台,创建project(注意:首次使用的用户需要申请开通) 1.3 安装Docker环境 Docker官方说明了在不同操作系统下安装Docker的方法,您可以点击此处查看。

docker 阿里云 HTTPS 日志 镜像 数据分析 操作系统 控制台 aliyun test Registry 数据采集 MaxCompute

Docker监控技术原理和阿里云容器监控服务实践

在云栖社区组织的云栖计算之旅第2期-Docker在云平台上的最佳实践专场中,阿里云晨末做了题为Docker监控原理和阿里云容器监控服务实践的分享。在本次分享中,他谈到了监控的重要性并且针对于Docker容器的监控技术进行了精彩分享。

架构 监控 docker 阿里云 集群 容器 弹性伸缩 数据采集

实战云端CRM变革,挖掘零售电商潜能

自从电商开始真实运作的那天,人们便开始关注电商平台上的标准化数据所带来的潜在价值。但要采集和分析这些数据并不是一件容易的事。由于数据分析往往基于特定的场景,很难找到通用的模型,本文将网聚宝业务中遇到数据分析的类型和阿里云产品的解决方案进行了介绍,详解基于阿里云的云计算服务如何处理这些电商平台数据。

阿里云 RDS 性能 数据库 电商 数据分析 数据采集 存储 凌云

杭州装上“城市大脑”——车辆通行速度最高提升11%

【本文转载自中国城市报】 日前,杭州市政府公布了一项“城市大脑”计划:为这座首批列入国家智慧城市试点的城市,安装一个人工智能中枢——杭州城市数据大脑。在杭州萧山区的部分路段初步试验中,城市大脑通过智能调节红绿灯,车辆通行速度最高提升了11%。

大数据 算法 飞天 阿里云 人工智能 基础设施 数据采集 神经网络 数据应用

云时代下的性能优化&运维实践之路

本文PPT来自陈以鎏(离青)和阿里巴巴技术专家熊奇(冰撤)于10月15日在2016年杭州云栖大会上发表的《云时代下的性能优化&运维实践之路》。

监控 性能优化 性能 网络性能 容器 性能管理 数据采集

计算医疗 智由云生——医疗云体系架构

本文PPT来自阿里云高级架构师赵庆元于10月16日在2016年杭州云栖大会上发表的《计算医疗 智由云生——医疗云体系架构》。

大数据 架构 阿里云 云栖大会 数据处理 高可用 互联网 解决方案 运营 医疗 系统安全 数据采集

我们为什么需要Greenplum?

自去年Greenplum开源以来,在GitHub上已经有400个以上分支版本,展现出了强大的生命力。在2016云栖大会杭州峰会开源数据库之 Greenplum专场上,博雅立方站在中小型数据分析企业的立场上分享了在数据库选择上的演变历程,以及为什么选择Greenplum。

大数据 postgres 数据库 数据仓库 并行计算 数据采集 存储 数据类型

云平台打造智慧水务新模式

10月13日2016杭州云栖大会拉开帷幕,大数据专场的上海威派格智慧水务股份有限公司董事杨峰带来了“工业云促进智慧水务建设”的重要演讲。本次分享主要从水务信息的挑战开始讲起,谈及工业互联理念的解决架构,进而讲解了智慧水务工业云,包括威派格与阿里云的结合等。精彩不容错过——

架构 阿里云 云栖大会 物联网 云平台 数据采集

徐工阿里“云端”布棋局,打造中国工业的Predix

10月13日2016杭州云栖大会拉开帷幕,智能工业专场的徐工集团信息公司CEO张启亮带来了“徐工集团的工业大数据之路”的重要演讲。首先从信息化的发展历程开始讲起,进而谈及工业大数据平台,接着着重讲述了制造业大数据的流程再造,最后分享了徐工工业云平台。

大数据 互联网 云服务 物联网 专有云 云平台 数据采集 工业物联网 制造业

MaxCompute实战之数据存储

无论是做数据分析还是数据挖掘,都离不开数据。而MaxCompute不负责收集数据,他只负责处理数据,就好比你有台酸奶机但是没牛奶(MaxCompute比作酸奶机,数据比作牛奶)。所以先把海量的日志数据收集起来是第一步要做的工

python 大数据 日志 阿里技术协会 数据采集

hadoop整体结构图及服务组件详解

hadoop服务组件简单解释 1、core  分布式系统和通用IO组件和接口(序列化、java远程调用等等服务) 2、avro  支持跨语言过程调用,持久数据存储的数据序列化系统 3、MapReduce  构建在廉价的pc机器上分布式数据处理模型和运行环境 4、hdfs  构建廉价的pc机器上分布式文件系统 5、pig  处理海量数据集的数据流语

分布式 hbase hdfs hadoop 数据处理 数据库 数据流 数据仓库 分布式文件系统 分布式系统 数据采集 zookeeper Mapreduce 存储

公网数据采集比较(LogHub vs 自建前端机)

对一些应用场景而言,需要实时收集公网数据,例如移动端,HTML网页,PC、服务器、硬件设备、摄像头等实时数据进行处理。 在传统的架构中,一般通过前端服务器+Kafka这样的搭配来实现如上的功能。现在日志服务的LogHub功能能够代替这类架构,并提供更稳定、低成本、弹性、安全的解决方案。我们来比

日志服务 数据采集 kafka 公网

64
GO