joseph525 + 关注
擅长大数据技术开发,负责大数据存储平台3年,现做大数据应用

joseph525 发表了文章:

Facebook开源预测工具Prophet安装

发布时间:2020-01-17 11:18:26 浏览:820 回帖 :0

0x1 依赖包安装 注:本文描述的安装过程是基于Centos操作系统 依赖环境:gcc, gcc-c++, python-devel, python3-devel 可以直接通过yum install...

机器学习 code open pip facebook file html prophet

joseph525 发表了文章:

Flink落HDFS数据按事件时间分区解决方案

发布时间:2019-09-29 20:23:47 浏览:1446 回帖 :1

0x1 摘要 Hive离线数仓中为了查询分析方便,几乎所有表都会划分分区,最为常见的是按天分区,Flink通过以下配置把数据写入HDFS, BucketingSink<Object> sink = ...

java hdfs 源码 path code 解决方案 string 分区 flink 事件时间 跨天

joseph525 发表了文章:

Flink BucketingSink 源码分析

发布时间:2019-09-22 11:00:38 浏览:5846 回帖 :0

0x1 摘要 BucketingSink类提供了非常完美的功能支持数据落HDFS,在实际业务中不建议自己去实现,直接采用此类可以避免一些坑。注:此文基于Flink 1.6.3 版本源码。 0x2 ...

java 源码 path flink BucketingSink

joseph525 发表了文章:

Flink WindowOperator 源码分析

发布时间:2019-06-29 16:03:17 浏览:660 回帖 :0

0x1 摘要 WindowOperator可以说是Flink窗口功能非常核心核心的类,是窗口功能源码的一条主线,延着这条主线去慢慢看源码会轻松很多。注:此文基于Flink 1.4.2 版本源码。 ...

源码 exception void flink WindowOperator

joseph525 发表了文章:

Flink 闭包清除源码分析

发布时间:2019-06-06 17:00:26 浏览:1485 回帖 :0

0x1 摘要 本文主要讲解Flink里为什么需要做闭包清除?Flink是怎么实现闭包清除的? 0x2 Flink 为什么要做闭包清除 大家都知道Flink中算子都是通过序列化分发到各节点上,所以要确...

源码 string static exception class 闭包 flink ClosureCleaner

joseph525 发表了文章:

Flink 事件时间的陷进及解决思路

发布时间:2018-12-17 14:55:35 浏览:3114 回帖 :0

Processing string 数据结构 水印 flink 事件时间

joseph525 发表了文章:

Pulsar 集群安装

发布时间:2018-11-28 13:27:20 浏览:1978 回帖 :0

java 消息队列 Apache 集群 MQ Server metadata zookeeper Pulsar

joseph525 发表了文章:

Flink 1.4.2 版本踩过的坑

发布时间:2018-06-07 13:45:39 浏览:4294 回帖 :0

java Json Apache 源码 API arraylist ScreenShot Split Process flink

joseph525 发表了文章:

序列化、反序列化性能测试

发布时间:2018-05-14 13:46:42 浏览:1829 回帖 :0

0x1 摘要 平时开发中经常听到序列与反序列化,特别是在分布式系统与RPC应用中,今天突然心血来潮对几种常用的序列化框架做个性能测试对比,测试对象: Java 原生序列 Avro Thrift...

java 测试 string 序列 开发工具 性能测试 分布式系统 thrift 序列化 Protobuf Avro

joseph525 发表了文章:

ArrayList 序列化分析

发布时间:2018-05-07 13:57:16 浏览:6220 回帖 :0

java 源码 序列 read 数据结构 arraylist 存储 数组 序列化

joseph525 发表了文章:

Java 动态代理

发布时间:2018-03-29 13:12:38 浏览:1400 回帖 :0

java 源码 string static class login 动态代理 静态代理

joseph525 发表了文章:

HDFS FileSystem 源码分析

发布时间:2018-03-23 14:25:18 浏览:1387 回帖 :0

java hdfs 源码 配置 string static class file

擅长大数据技术开发,负责大数据存储平台3年,现做大数据应用

感兴趣or擅长的领域:

更多>
更多>
游客ktjfz3wr4l7zq
游客ktjfz3wr4l7zq
文章:0丨 粉丝:0丨 话题:0
Tonylp
Tonylp
文章:0丨 粉丝:0丨 话题:0
游客y6zkucl7iinne
游客y6zkucl7iinne
文章:0丨 粉丝:0丨 话题:0
游客fusgpx5gibwwo
游客fusgpx5gibwwo
文章:0丨 粉丝:0丨 话题:0
Imnio
Imnio
文章:0丨 粉丝:0丨 话题:0
zz2019
zz2019
文章:0丨 粉丝:2丨 话题:0