1. 云栖社区>
  2. 全部标签>
  3. #storm#
storm

#storm#

已有3人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

探寻流式计算

流计算的出现拓宽了应对复杂实时计算需求能力。Storm作为流计算的利器,极大方便了应用。

分布式 大数据 storm 性能 数据处理 数据流 数据仓库 集群 流式计算 html 存储 数据存储 流计算 流数据

浅谈分布式计算的开发与实现(二)

实时计算 接上篇,离线计算是对已经入库的数据进行计算,在查询时对批量数据进行检索、磁盘读取展示。 而实时计算是在数据产生时就对其进行计算,然后实时展示结果,一般是秒级。 举个例子来说,如果有个大型网站,要实时统计用户的搜索内容,这样就能计算出热点新闻及突发事件了。

云栖社区 编程语言 分布式 redis Java核心技术 java storm 消息队列 程序员 流式计算 分布式计算 离线计算 磁盘 后端开发

搞懂分布式技术24:基于Flume+Kafka+ Elasticsearch+Storm的海量日志实时分析平台:

0背景介绍 随着机器个数的增加、各种服务、各种组件的扩容、开发人员的递增,日志的运维问题是日渐尖锐。通常,日志都是存储在服务运行的本地机器上,使用脚本来管理,一般非压缩日志保留最近三天,压缩保留最近1个月,其它直接删除或迁移到日志服务器上。

分布式 redis 架构 监控 storm 日志 配置 集群 Elasticsearch

Hadoop生态基础学习总结

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/a724888/article/details/80956973 这位大侠,这是我的公众号:程序员江湖。

分布式 storm hbase hdfs hadoop 高可用 集群 spark supervisor zookeeper Mapreduce 存储

搞懂分布式技术25:初探大数据计算框架与平台

1. 前言 计算机的基本工作就是处理数据,包括磁盘文件中的数据,通过网络传输的数据流或数据包,数据库中的结构化数据等。

分布式 大数据 storm hadoop Apache 数据处理 数据库 reduce 排序 spark 分布式计算 Hive Mapreduce 流计算

那些年,我们见过的Java服务端乱象 | 8月6号云栖夜读

今天的首篇文章,讲述了:查尔斯·狄更斯在《双城记》中写道:“这是一个最好的时代,也是一个最坏的时代。”移动互联网的快速发展,出现了许多新机遇,很多创业者伺机而动;随着行业竞争加剧,互联网红利逐渐消失,很多创业公司九死一生。

算法 java storm 服务器 电商 aliyun 存储

58 集团大规模 Storm 任务平滑迁移至 Flink 的秘密

本文主要讲述 58 实时计算平台如何优化 Flink-Storm 以及基于 Flink-Storm 实现真实场景下大规模 Storm 任务平滑迁移 Flink。

大数据 storm 模块 数据处理 配置 集群 Image 实时计算 Apache_Flink 58 Flink-storm

如何基于日志,同步实现数据的一致性和实时抽取?

本文将详细介绍基于日志的DWS平台实现和应用。如何基于日志,同步实现数据的一致性和实时抽取。

大数据 storm mysql 性能 日志 数据处理 数据库 配置 同步 spark 实时数据

360深度实践:Flink 与 Storm 协议级对比

本文从数据传输和数据可靠性的角度出发,对比测试了 Storm 与 Flink 在流处理上的性能,并对测试结果进行分析,给出在使用 Flink 时提高性能的建议。

大数据 storm 性能 线程 测试 流计算 flink 实时计算 性能对比 应用实践案例

数据中台专栏(四):数据中台设计与数据资产管理

本文作者:王立飞 袋鼠云大数据解决方案专家。专注于云计算、大数据、企业级技术架构(EA)等领域,在互联网、零售、工业等行业有深入的理解和丰富的从业经验,曾带领项目团队完成中金易云、货币网、固德威等企业级大数据项目交付,擅长行业大数据解决方案的咨询与落地。

数据存储与数据库 大数据 架构 算法 分布式系统与计算 storm 资产管理 配置 数据仓库 袋鼠云 淘宝 数据中心

大数据入门干货

  首先,提及大数据一词的概念。大数据本质还在于数据,但是它有着新的特征亮点。包括:数据来源广,数据格式多样化(结构化数据、非结构化数据、Excel文件、文本文件等)、数据量大(最少也是TB级别的、甚至可能是PB级别)、数据增长速度快等等。

python 分布式 大数据 架构 storm hdfs 集群 spark 流式计算 数据采集 Mapreduce 存储 数据存储

好程序员教你大数据必修三大技能 快快记录下来

大数据,人工智能技术引领科技潮流,推开大数据时代的大门!国家点赞!政策扶持,前景斐然!紧接着,学习大数据的人才便如过江之鲫,络绎不绝!整体形势,欣欣向荣!在这里,好程序员为大家送上技术干货,助大家一臂之力,学习大数据技术,一定要注重培训质量,只有如此,方可事半功倍!接下来,就为大家讲解,大数据必修的三大课程!  一、Hadoop生态体系  Hadoop 是一个分布式系统基础架构,由Apache基金会开发。

编程语言 分布式 大数据 storm hadoop 程序员 数据处理 人工智能 数据流 集群 spark scala hadoo

32
GO