Tigon —— 开源的高吞吐量的流处理框架

简介:

Tigon 是一个开源的、实时的、低延迟、高吞吐量的流处理框架。基于 Apache Hadoop 和 Apache HBase 构建。Tigon 严重依赖开源项目 Tephra 和 Apache Twill 提供紧密的集成到已有的 Hadoop/HBase 集群中。

文章转载自 开源中国社区 [http://www.oschina.net]

相关文章
|
4月前
|
消息中间件 Dubbo 调度
分布式批处理框架在大促场景下的设计与实现
分布式批处理框架在大促场景下的设计与实现
|
5月前
|
存储 分布式计算 大数据
大数据处理平台的架构演进:从批处理到实时流处理
大数据处理平台的架构演进:从批处理到实时流处理
104 0
|
10月前
|
传感器 消息中间件 缓存
低延迟系统设计:实时数据处理和事件驱动架构
在当今的数字化时代,用户对实时性和低延迟的要求越来越高,特别是对于涉及数据处理和事件响应的系统。无论是金融交易、实时监控、在线游戏还是物联网应用,低延迟系统设计都成为了开发者的重要挑战。本文将介绍一种解决方案:实时数据处理和事件驱动架构,帮助开发者构建高效、快速响应的低延迟系统。
331 0
《分布式流处理框架——功能对比和性能评估》电子版地址
分布式流处理框架——功能对比和性能评估
61 0
《分布式流处理框架——功能对比和性能评估》电子版地址
|
SQL 缓存 运维
更快更稳更易用: Flink 自适应批处理能力演进
朱翥、贺小令在 9.24 Apache Flink Meetup 的演讲内容整理。
更快更稳更易用: Flink 自适应批处理能力演进
|
XML SpringCloudAlibaba Dubbo
这次我设计了一款TPS百万级别的分布式、高性能、可扩展的RPC框架
这次我设计了一款TPS百万级别的分布式、高性能、可扩展的RPC框架
226 0
这次我设计了一款TPS百万级别的分布式、高性能、可扩展的RPC框架
|
消息中间件 存储 大数据
实时流处理框架之Storm的安装与部署
实时流处理框架之Storm的安装与部署
196 0
实时流处理框架之Storm的安装与部署
|
资源调度 分布式计算 运维
基于任务调度的企业级分布式批处理方案
分布式任务调度平台 SchedulerX 为企业级分布式批处理提供来完善的解决方案,为用户提供了快速易用的接入模式,并支持定时调度、可视化运行跟踪、可管控简运维、高可用的调度服务,同时配套企业级监控大盘、日志服务、监控报警等能力。
基于任务调度的企业级分布式批处理方案
|
消息中间件 算法 固态存储
主流实时流处理计算框架Flink初体验。
Apache Flink是由Apache软件基金会开发的开源流处理框架,其核心是用Java和Scala编写的分布式流数据流引擎。Flink以数据并行和流水线方式执行任意流数据程序,Flink的流水线运行时系统可以执行批处理和流处理程序。此外,Flink的运行时本身也支持迭代算法的执行。Flink 是一个框架和分布式处理引擎,用于对无界和有界数据流进行状态计算。Flink 被设计为在所有常见的集群环境中运行,以内存中的速度和任何规模执行计算。Apache Flink 是为分布式、高性能、随时可用以及准确的流处理应用程序打造的开源流处理框架。
主流实时流处理计算框架Flink初体验。
|
存储 缓存 算法
Flink大规模作业调度性能优化
作者:洪志龙(柏星)& 朱翥(长耕)随着 Flink 流批一体架构不断演进和升级,越来越多的用户开始选择用 Flink 来同时承载实时和离线的业务。离线业务和实时业务有一定差异性,其中比较关键的一点是——离线作业的规模通常都远远大于实时作业。超大规模的流批作业对Flink的调度性能提出了新的挑战。在基于Flink 1.12版本部署大规模流批作业时,用户可能会遇到以下瓶颈: 需要很长时间才能
284 2
Flink大规模作业调度性能优化

热门文章

最新文章