王知无 + 关注
Github: https://github.com/wangzhiwubigdata/God-Of-BigData

王知无 发表了文章:

分布式一致性协议的一点笔记

发布时间:2020-02-20 23:41:32 浏览:171 回帖 :0

分布式系统中有个著名的原则CAP原则,C为Consistency(一致性)、A为Availability(可用性)、P为Partition tolerance(分区容错性)。这里主要介绍下分布式环境...

云栖社区 数据存储与数据库 分布式 大数据 算法 分布式系统与计算 日志 paxos 集群

王知无 发表了文章:

Spark源码阅读的正确打开方式

发布时间:2020-02-10 19:25:10 浏览:223 回帖 :0

Spark发展至今,应该说已经非常成熟了。是大数据计算领域不得不学习的框架。尤其是Spark在稳定性和社区发展的成熟度方面,吊打其他的大数据处理框架。 Spark至今只经历过1.x、2.x和3.x三...

分布式 大数据 源码 集群 内存管理 Image spark

王知无 发表了文章:

大数据总纲 | 大数据方向学习面试知识图谱

发布时间:2019-09-15 14:16:10 浏览:112 回帖 :0

愿读到这篇文章的技术人早日明白并且脱离技术本身,早登彼岸。一切技术最终只是雕虫小技。 大纲 本系列主题是大数据开发面试指南,旨在为大家提供一个大数据学习的基本路线,完善数据开发的技术栈,以及我们面...

云栖社区 分布式 大数据 架构 算法 java hbase hadoop SQL 线程 集群 消息中间件 spark Hive 知识图谱

王知无 发表了文章:

Pulsar与Kafka消费模型对比

发布时间:2019-08-20 00:04:55 浏览:40 回帖 :0

kafka kafka 属于 Stream 的消费模型,为了支持多 partition 的消费关系,引入了 consumer group 的概念,同时支持在消费端动态的 reblance 操作,当多...

云栖社区 大数据 Image Consumer stream Pulsar

王知无 发表了文章:

Java中多个ifelse语句的替代设计

发布时间:2019-08-18 10:43:02 浏览:576 回帖 :0

今天在改老代码的过程中,亲眼见证了一段30个if-else嵌套的代码... 然后搜集了一些资料做了以下简单整理。 概述 ifelse是任何编程语言的重要组成部分。但是我们编写了大量嵌套的if语句,这...

大数据 java string static class 规则引擎

王知无 发表了文章:

面试系列:十个海量数据处理方法大总结

发布时间:2019-08-18 10:38:28 浏览:659 回帖 :0

5万人关注的大数据成神之路,不来了解一下吗?5万人关注的大数据成神之路,真的不来了解一下吗?5万人关注的大数据成神之路,确定真的不来了解一下吗? 欢迎您关注《大数据成神之路》 本文将简单总结下一些...

大数据 函数 HASH 索引 存储 数组 海量数据 海量数据处理

王知无 发表了文章:

一道真实的面试题 | 如何保证消息队列的高可用

发布时间:2019-08-17 21:03:33 浏览:597 回帖 :0

5万人关注的大数据成神之路,不来了解一下吗?5万人关注的大数据成神之路,真的不来了解一下吗?5万人关注的大数据成神之路,确定真的不来了解一下吗? 欢迎您关注《大数据成神之路》 面试题:如何保证消息...

云栖社区 分布式 大数据 消息队列 高可用 镜像 集群 同步 MQ 数据同步 面试题

王知无 发表了文章:

SparkSQL的3种Join实现

发布时间:2019-08-17 20:57:41 浏览:651 回帖 :0

5万人关注的大数据成神之路,不来了解一下吗?5万人关注的大数据成神之路,真的不来了解一下吗?5万人关注的大数据成神之路,确定真的不来了解一下吗? 欢迎您关注《大数据成神之路》 引言 Join是SQ...

云栖社区 分布式 大数据 算法 集群 Image spark HASH Driver Shuffle

王知无 发表了文章:

你有必要了解一下Flink底层RPC使用的框架和原理

发布时间:2019-08-17 20:52:25 浏览:731 回帖 :0

5万人关注的大数据成神之路,不来了解一下吗?5万人关注的大数据成神之路,真的不来了解一下吗?5万人关注的大数据成神之路,确定真的不来了解一下吗? 欢迎您关注《大数据成神之路》 前言 对于Flink...

RPC 大数据 线程 string Akka class flink

王知无 发表了文章:

听说你熟悉Flink-On-Yarn的部署模式?

发布时间:2019-08-17 20:45:51 浏览:579 回帖 :0

5万人关注的大数据成神之路,不来了解一下吗?5万人关注的大数据成神之路,真的不来了解一下吗?5万人关注的大数据成神之路,确定真的不来了解一下吗? 欢迎您关注《大数据成神之路》 前言 Flink提供...

大数据 集群 flink

王知无 发表了文章:

浅谈数据同步之道

发布时间:2019-08-17 20:44:00 浏览:381 回帖 :0

大数据 Image 数据同步

王知无 发表了文章:

Spark中几种ShuffleWriter的区别你都知道吗?

发布时间:2019-08-17 20:34:08 浏览:544 回帖 :0

一.前言 在Spark中有三种shuffle写,分别是BypassMergeSortShuffleWriter、UnsafeShuffleWriter、SortShuffleWriter。分别对应三...

大数据 排序 spark 磁盘 数据结构 存储

王知无 发表了文章:

Flink UDF自动注册实践

发布时间:2019-08-17 20:29:07 浏览:623 回帖 :0

1.注册UDF函数1.1 注册相关方法此处,我们使用的udf函数为标量函数,它继承的是ScalarFunction,该类在我们的使用中,发现它继承自UserDefinedFunction这个类,该处的...

java 函数 Apache runtime string class UDF unit flink

王知无 发表了文章:

Flink在大规模状态数据集下的checkpoint调优

发布时间:2019-08-17 19:54:14 浏览:1032 回帖 :0

5万人关注的大数据成神之路,不来了解一下吗?5万人关注的大数据成神之路,真的不来了解一下吗?5万人关注的大数据成神之路,确定真的不来了解一下吗? 欢迎您关注《大数据成神之路》 今天接到一个同学的反...

大数据 java hdfs hadoop Apache runtime Server 存储 flink

王知无 发表了文章:

使用Flink实现索引数据到Elasticsearch

发布时间:2019-08-17 19:48:46 浏览:616 回帖 :0

5万人关注的大数据成神之路,不来了解一下吗? 5万人关注的大数据成神之路,真的不来了解一下吗? 5万人关注的大数据成神之路,确定真的不来了解一下吗? 欢迎您关注《大数据成神之路》 使用Flink处...

大数据 配置 索引 string Elasticsearch void 存储 flink

王知无 发表了文章:

Apache Flink:Keyed Window与Non-Keyed Window

发布时间:2019-08-17 19:26:48 浏览:450 回帖 :0

5万人关注的大数据成神之路,不来了解一下吗?5万人关注的大数据成神之路,真的不来了解一下吗?5万人关注的大数据成神之路,确定真的不来了解一下吗? Apache Flink中,Window操作在流式数...

云栖社区 大数据 Apache Image string stream 编程 flink

王知无 发表了文章:

Flink Exactly-Once 投递实现浅析

发布时间:2019-08-17 19:17:01 浏览:731 回帖 :0

5万人关注的大数据成神之路,不来了解一下吗? 5万人关注的大数据成神之路,真的不来了解一下吗? 5万人关注的大数据成神之路,确定真的不来了解一下吗? 随着近来越来越多的业务迁移到 Flink 上,对...

云栖社区 分布式 大数据 实时系统 流式计算 分布式系统 file Commit 流计算 flink

王知无 发表了文章:

Flink 网络传输优化技术

发布时间:2019-08-17 18:46:23 浏览:768 回帖 :0

5万人关注的大数据成神之路,不来了解一下吗? 5万人关注的大数据成神之路,真的不来了解一下吗? 5万人关注的大数据成神之路,确定真的不来了解一下吗? 作为工业级的流计算框架,Flink 被设计为...

大数据 性能 线程 数据流 Image Server 序列 netty 数组 network flink

王知无 发表了文章:

Redis单线程?别逗了,Redis6.0多线程重磅来袭!

发布时间:2019-08-17 18:26:02 浏览:1041 回帖 :0

2019年的 RedisConf 比以往时候来的更早一些,今年会议时间是4月1-3号,仍然是在旧金山鱼人码头Pier 27。恰逢今年是 Redis 第10周年,规模也比以往大一些,注册人数超过160...

redis 性能优化 性能 线程 Image 多线程 云数据库Redis版

王知无 发表了文章:

Flink/Spark 如何实现动态更新作业配置

发布时间:2019-08-17 18:20:30 浏览:561 回帖 :0

由于实时场景对可用性十分敏感,实时作业通常需要避免频繁重启,因此动态加载作业配置(变量)是实时计算里十分常见的需求,比如通常复杂事件处理 (CEP) 的规则或者在线机器学习的模型。尽管常见,实现起来却...

数据流 配置 spark Driver stream flink

3
Github: https://github.com/wangzhiwubigdata/God-Of-BigData

感兴趣or擅长的领域:

更多>
更多>
游客q5zablt332ac4
游客q5zablt332ac4
文章:0丨 粉丝:0丨 话题:0
李仁鹏
李仁鹏
文章:0丨 粉丝:0丨 话题:0
游客re5vqnodgf7bu
游客re5vqnodgf7bu
文章:0丨 粉丝:0丨 话题:0
游客4bkjsbk7jql5g
游客4bkjsbk7jql5g
文章:0丨 粉丝:0丨 话题:0
游客djex3rhirnpmw
游客djex3rhirnpmw
文章:0丨 粉丝:0丨 话题:0
游客c2f42hc2d5xla
游客c2f42hc2d5xla
文章:0丨 粉丝:0丨 话题:0