1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. D>
  5. 大数据 storm

当前主题:大数据 storm

大数据的实时处理STORM简介

版权声明:本文为博主chszs的原创文章,未经博主允许不得转载。 https://blog.csdn.net/chszs/article/details/9292831 《大数据的实时处理STOR

阅读全文

大数据的实时处理STORM简介

新技术如社交媒体、电邮、博客、地理信息系统GIS、无线射频识别RFID和智能手机等为基于服务信息构建提供了新的机会。 处理大数据常见的方法和框架是Apache Hadoop,它以批处理的方式运行数据处理任务。现在,如果需要实时处理数据和实时显

阅读全文

《Storm技术内幕与大数据实践》一第9章 大数据应用案例

本节书摘来异步社区《Storm技术内幕与大数据实践》一书中的第9章,第9.1节,作者: 陈敏敏 , 黄奉线 , 王新春 责编: 杨海玲,更多章节内容可以访问云栖社区“异步社区”公众号查看。 第9章 大数据应用案例 Storm技术内幕与大数据实践 本章中主要介

阅读全文

流式大数据处理的三种框架:Storm,Spark和Samza

流式大数据处理的三种框架:Storm,Spark和Samza

阅读全文

Storm概念学习系列 之数据流模型、Storm数据流模型

数据流模型   数据流模型是由数据流、数据处理任务、数据节点、数据处理任务实例等构成的一种数据模型。本节将介绍的数据流模型如图1所示。 分布式流处理系统由多个数据处理节点(node)组成,每个数据处理节点上运行有多个数据任务实例,每个数据任务实例属于一个数据任

阅读全文

Apache Storm源码阅读笔记&OLAP在大数据时代的挑战

<一>Apache Storm源码阅读笔记 楔子 自从建了Spark交流的QQ群之后,热情加入的同学不少,大家不仅对Spark很热衷对于Storm也是充满好奇。大家都提到一个问题就是有关storm内部实现机理的资料比较少,理解起来非常费劲。 尽管自己也陆续对

阅读全文

《Storm技术内幕与大数据实践》一1.1 Storm的基本组件

本节书摘来异步社区《Storm技术内幕与大数据实践》一书中的第1章,第1.1节,作者: 陈敏敏 , 黄奉线 , 王新春 责编: 杨海玲,更多章节内容可以访问云栖社区“异步社区”公众号查看。 1.1 Storm的基本组件 1.1.1 集群组成 Storm的集群

阅读全文

58 集团大规模 Storm 任务平滑迁移至 Flink 的秘密

Flink-Storm 是 Flink 官方提供的用于 Flink 兼容 Storm 程序 beta 工具,并且在 Release 1.8 之后去掉相关代码。本文主要讲述 58 实时计算平台如何优化 Flink-Storm 以及基于 Flink-Storm

阅读全文

大数据 storm相关问答

查看更多 提问题

在生产环境下,storm的的数据源应该是什么比较好

采用storm做实时流计算处理,spout应该从什么地方获取数据?

阅读全文

市面上很多大数据框架,为什么要自研大数据平台

专家你好,正在听您的演讲。特别想了解下,现在有Hadoop、Spark、Storm等热门的大数据框架,你们为什么还会去自研大数据平台?

阅读全文

企业大数据平台仓库架构建设思路【精品问答集锦】

本期请来了阿里云高级技术专家李金波(介然)直播分享企业大数据平台仓库架构建设思路 直播简介 随着互联网规模不断的扩大,数据也在爆炸式地增长,各种结构化、半结构化、非结构化数据的产生,越来越多的企业开始在大数据平台下进行数据处理。作为大数据应用的基础-数

阅读全文

flink从checkpoint中恢复任务失败

您好,请教一个问题。 我手动执行命令从checkpoint中恢复,但是提示文件不存在。 生成的checkpoint文件如下 ![image](https://yqfile.alicdn.com/04376691187c82b3984c0c401506fb

阅读全文

hbase如何设计实现大流量实时读写pv,uv等统计指标?

假设通过storm接入了每小时百万级的埋点数据(有userId和url字段),要求可以实现能够实时获取某个用户每天,每周或每月访问了某个url的累加值。读和写的量都较大且实时性要求比较高。hbase的话如何设计才能实现读写在时间上最优?

阅读全文

域名访问突然就变这样了?

![screenshot](https://yqfile.alicdn.com/35e9c6814c3c5b31809f0694fd740d949dc97b29.png) This XML file does not appear to have any s

阅读全文