1. 云栖社区>
  2. 全部标签>
  3. #数据采集#
数据采集

#数据采集#

已有2人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

阿里云ADAM(亚当)体验记录

阿里云的亚当(ADAM)是Advanced Database & Application Migration的缩写,是一款把数据库和应用迁移到阿里云(公共云或专有云)的产品,主要面向的是正在使用Oracle数据库并希望将其替换为阿里云数据库服务的客户。

linux 服务器 Oracle 云服务器 数据库 数据迁移 控制台 数据库迁移 数据采集

阿里云容器Kubernetes监控(五) - 离线存储与归档Kubernetes事件

前言 在上一篇文章中,向大家介绍了如何通过eventer将Kubernetes中的事件告警到钉钉群中,那么如何将这些非常有价值的事件进行离线存储与归档呢? 目前eventer支持elasticsearch、influxdb、kafka、sls四种离线存储的链路。

云栖社区 监控 SLS 集群 容器 Image 钉钉 控制台 Elasticsearch 数据采集 metadata 存储 kubernetes MaxCompute

爬虫---如何抓取app的思路和方案

爬虫---如何抓取app的思路和方案背景2015年,谷歌开始对外部App的内部链接和内容进行抓取,目前已经累计抓取了300多亿个。 搜索引擎是内容门户之后的互联网第二次重大技术革命。然而伴随着智能手机的普及,应用软件(APP)取代网页,成为主流的技术。

算法 加密 搜索引擎 数据采集 移动互联网 activity

轻松可视化实现设备监控大屏效果

前言 前期团队一直在搭建与云端服务器对接的事情,近期终于落地,数据采集中心实现了服务端与可视化编辑器的融合,整个案例中脚本就两百行左右,基本通过可视化平台配置完成,体现了,我们平台的高效性。今天通过本案例讲解下服务端接口搭建、服务端与可视化编辑器是如何配合使用的 看板效果图 可视化端实现的交互效果.

云栖社区 大数据 监控 函数 容器 数据采集

宜信开源|数据库审核软件Themis的规则解析与部署攻略

Themis是宜信公司DBA团队开发的一款数据库审核产品,可帮助DBA、开发人员快速发现数据库质量问题,提升工作效率。本文为其规则解析和部署攻略。

数据存储与数据库 python redis mysql Oracle Json 模块 数据库 开源 配置 supervisor 数据采集 type celery

基于日志服务的GrowthHacking(1):数据埋点和采集(APP、Web、邮件、短信、二维码埋点技术)

数据质量决定运营分析的质量 在上文中,我们介绍了GrowthHacking的整体架构,其中数据采集是整个数据分析的基础,只有有了数据,才能进行有价值的分析;只有高质量的数据,才能驱动高质量的运营分析.可以说,数据质量决定了运营质量。

服务器 日志 日志服务 web logger Image aliyun 运营 数据采集 html GrowthHacking

云上的Growth hacking之路,打造产品的增长引擎

增长关乎产品的存亡 增长!增长!增长!业务增长是每一个创业者每天面临的最大问题。无论你的产品是APP,还是web,或者是小程序,只能不断的维持用户的增长,才能向资本市场讲出一个好故事,融资活下去。活到最后的产品,才有机会盈利。

架构 日志 日志服务 SLS Image aliyun 运营 报表 数据采集 html 存储 增长黑客

DataSimba系列之流式计算

市场变化越来越快,企业对于数据及时性的需求,也越来越大,另一方面,当下数据容量呈几何倍暴增,数据的价值在其产生之后,也将随着时间的流逝,逐渐降低。 因此,我们最好在事件发生之后,迅速对其进行有效处理,实时,快速地处理新产生的数据,帮助企业快速地进行异常管理和有效决策,而不是待数据存储在一起之后,再进行批量处理。

分布式 大数据 架构 监控 hbase 数据库 spark 流式计算 离线计算 数据采集 数据存储 流计算 海量数据 多维分析 数据中台

63
GO