1. 云栖社区>
  2. 全部标签>
  3. #storm#
storm

#storm#

已有3人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

搞懂分布式技术24:基于Flume+Kafka+ Elasticsearch+Storm的海量日志实时分析平台:

0背景介绍 随着机器个数的增加、各种服务、各种组件的扩容、开发人员的递增,日志的运维问题是日渐尖锐。通常,日志都是存储在服务运行的本地机器上,使用脚本来管理,一般非压缩日志保留最近三天,压缩保留最近1个月,其它直接删除或迁移到日志服务器上。

分布式 redis 架构 监控 storm 日志 配置 集群 Elasticsearch

Hadoop生态基础学习总结

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/a724888/article/details/80956973 这位大侠,这是我的公众号:程序员江湖。

分布式 storm hbase hdfs hadoop 高可用 集群 spark supervisor zookeeper Mapreduce 存储

搞懂分布式技术25:初探大数据计算框架与平台

1. 前言 计算机的基本工作就是处理数据,包括磁盘文件中的数据,通过网络传输的数据流或数据包,数据库中的结构化数据等。

分布式 大数据 storm hadoop Apache 数据处理 数据库 reduce 排序 spark 分布式计算 Hive Mapreduce 流计算

那些年,我们见过的Java服务端乱象 | 8月6号云栖夜读

今天的首篇文章,讲述了:查尔斯·狄更斯在《双城记》中写道:“这是一个最好的时代,也是一个最坏的时代。”移动互联网的快速发展,出现了许多新机遇,很多创业者伺机而动;随着行业竞争加剧,互联网红利逐渐消失,很多创业公司九死一生。

算法 java storm 服务器 电商 aliyun 存储

58 集团大规模 Storm 任务平滑迁移至 Flink 的秘密

本文主要讲述 58 实时计算平台如何优化 Flink-Storm 以及基于 Flink-Storm 实现真实场景下大规模 Storm 任务平滑迁移 Flink。

大数据 storm 模块 数据处理 配置 集群 Image 实时计算 Apache_Flink 58 Flink-storm

如何基于日志,同步实现数据的一致性和实时抽取?

本文将详细介绍基于日志的DWS平台实现和应用。如何基于日志,同步实现数据的一致性和实时抽取。

大数据 storm mysql 性能 日志 数据处理 数据库 配置 同步 spark 实时数据

360深度实践:Flink 与 Storm 协议级对比

本文从数据传输和数据可靠性的角度出发,对比测试了 Storm 与 Flink 在流处理上的性能,并对测试结果进行分析,给出在使用 Flink 时提高性能的建议。

大数据 storm 性能 线程 测试 流计算 flink 实时计算 性能对比 应用实践案例

数据中台专栏(四):数据中台设计与数据资产管理

本文作者:王立飞 袋鼠云大数据解决方案专家。专注于云计算、大数据、企业级技术架构(EA)等领域,在互联网、零售、工业等行业有深入的理解和丰富的从业经验,曾带领项目团队完成中金易云、货币网、固德威等企业级大数据项目交付,擅长行业大数据解决方案的咨询与落地。

数据存储与数据库 大数据 架构 算法 分布式系统与计算 storm 资产管理 配置 数据仓库 袋鼠云 淘宝 数据中心

大数据入门干货

  首先,提及大数据一词的概念。大数据本质还在于数据,但是它有着新的特征亮点。包括:数据来源广,数据格式多样化(结构化数据、非结构化数据、Excel文件、文本文件等)、数据量大(最少也是TB级别的、甚至可能是PB级别)、数据增长速度快等等。

python 分布式 大数据 架构 storm hdfs 集群 spark 流式计算 数据采集 Mapreduce 存储 数据存储

好程序员教你大数据必修三大技能 快快记录下来

大数据,人工智能技术引领科技潮流,推开大数据时代的大门!国家点赞!政策扶持,前景斐然!紧接着,学习大数据的人才便如过江之鲫,络绎不绝!整体形势,欣欣向荣!在这里,好程序员为大家送上技术干货,助大家一臂之力,学习大数据技术,一定要注重培训质量,只有如此,方可事半功倍!接下来,就为大家讲解,大数据必修的三大课程!  一、Hadoop生态体系  Hadoop 是一个分布式系统基础架构,由Apache基金会开发。

编程语言 分布式 大数据 storm hadoop 程序员 数据处理 人工智能 数据流 集群 spark scala hadoo

流计算框架 Flink 与 Storm 的性能对比

分布式实时计算框架 Flink 与 Storm 进行性能对比,为实时计算平台和业务提供数据参考。

大数据 storm 性能 线程 测试 流计算 flink 实时计算

Flink在饿了么的应用与实践

本文将为大家展示饿了么大数据平台在实时计算方面所做的工作,以及计算引擎的演变之路,你可以借此了解Storm、Spark、Flink的优缺点。如何选择一个合适的实时计算引擎?Flink凭借何种优势成为饿了么首选?本文将带你一一解开谜题。

大数据 storm SQL Processing spark 存储 流计算

32
GO