终日而思一 + 关注
欢迎关注公众号,哈尔的数据城堡。里面有数据,代码,以及深度思考。以及一些小彩蛋,欢迎关注

终日而思一 发表了文章:

深入浅出 Hadoop YARN

发布时间:2019-01-06 20:16:55 浏览:929 回帖 :0

一. Hadoop Yarn 是什么 在古老的 Hadoop1.0 中,MapReduce 的 JobTracker 负责了太多的工作,包括资源调度,管理众多的 TaskTracker 等工作。这自...

大数据 监控 hadoop 容器 分布式计算 应用管理 Mapreduce yarn

终日而思一 发表了文章:

从 hadoop 1.0 到 hadoop 2.0 的演化

发布时间:2018-12-25 21:12:18 浏览:448 回帖 :0

Hadoop 1.0 到 Hadoop 2.0 的演化是怎样的呢,从中我们又能学到什么。。。

终日而思一 发表了文章:

一个故事告诉你什么才是好的程序员

发布时间:2018-12-22 19:43:57 浏览:442 回帖 :1

深度学习 算法 程序员 人工智能

终日而思一 发表了文章:

大数据存储的进化史 --从 RAID 到 Hdfs

发布时间:2018-12-18 21:49:24 浏览:535 回帖 :0

我们都知道现在大数据存储用的基本都是 Hdfs ,但在 Hadoop 诞生之前,我们都是如何存储大量数据的呢?这次我们不聊技术架构什么的,而是从技术演化的角度来看看 Hadoop Hdfs。

大数据 架构 java 服务器 hdfs hadoop 集群 数据挖掘 分布式存储 磁盘 存储 数据存储

终日而思一 发表了文章:

Mysql 流增量写入 Hdfs(二) --Storm + hdfs 的流式处理

发布时间:2018-12-12 21:16:14 浏览:506 回帖 :0

一. 概述 上一篇我们介绍了如何将数据从 mysql 抛到 kafka,这次我们就专注于利用 storm 将数据写入到 hdfs 的过程,由于 storm 写入 hdfs 的可定制东西有些多,我们先...

大数据 storm mysql hdfs hadoop Apache string plugin

终日而思一 发表了文章:

终日而思一 发表了文章:

Spark SQL,如何将 DataFrame 转为 json 格式

发布时间:2018-12-06 20:13:51 浏览:852 回帖 :0

大数据 SQL Json Apache spark scala DataFrame API string

终日而思一 发表了文章:

贝叶斯分类算法实例 --根据姓名推测男女

发布时间:2018-11-29 20:29:14 浏览:724 回帖 :0

python 算法 函数 人工智能 github 贝叶斯

终日而思一 发表了文章:

终日而思一 发表了文章:

Actor并发编程模型浅析

发布时间:2018-11-16 20:44:43 浏览:826 回帖 :0

Actor 模型其实就是定义一组规则,这些规则规定了一组系统中各个模块如何交互及回应。在一个 Actor 系统中,Actor 是最小的单元模块,系统由多个 Actor 组成。每个 Actor 有两个东...

java 性能 模块 同步 scala 多线程 编程 并发 Actor模型

终日而思一 发表了文章:

聊聊 scala 的模式匹配

发布时间:2018-11-15 10:44:56 浏览:3561 回帖 :1

java scala string class pattern 模式匹配 matching

终日而思一 发表了文章:

Scala 中的异步事件处理

发布时间:2018-11-06 21:04:44 浏览:620 回帖 :0

scala 异步 input future

终日而思一 发表了文章:

python Kmeans算法解析

发布时间:2018-11-05 21:53:29 浏览:586 回帖 :0

python 算法 索引 Blog

终日而思一 发表了文章:

Spark DataFrame 的 groupBy vs groupByKey

发布时间:2018-11-04 16:30:01 浏览:2415 回帖 :0

spark DataFrame class Group

终日而思一 发表了文章:

Scala Try 与错误处理

发布时间:2018-11-01 21:23:52 浏览:525 回帖 :0

编程语言 RPC java 函数 scala string url source

终日而思一 发表了文章:

spark RDD,reduceByKey vs groupByKey

发布时间:2018-10-28 21:58:36 浏览:987 回帖 :0

spark big data

终日而思一 发表了文章:

让决策更有效率

发布时间:2018-10-25 20:55:36 浏览:720 回帖 :0

一. 头脑封闭和头脑开放 头脑封闭 你是否经常有这样的经历,在一次会议或者在一次小组讨论时,当你提出一个观点而被别人否定时,你非常急迫地去反驳别人,从而捍卫自己的尊严,而不是第一时间考虑别人提出这...

互联网产品及应用

终日而思一 发表了文章:

hadoop,spark,Zookeeper,,, 这些名字都是怎么来的呢?

发布时间:2018-10-16 21:34:17 浏览:701 回帖 :0

hadoop,spark,Zookeeper,,, 这些名字都是怎么来的呢?

分布式 大数据 服务器 hadoop Apache 集群 spark Mesos 分布式系统 Blog zookeeper

终日而思一 发表了文章:

spark大批量读取Hbase时出现java.lang.OutOfMemoryError: unable to create new native thread

发布时间:2018-10-11 22:03:22 浏览:1220 回帖 :0

spark大批量读取Hbase时出现java.lang.OutOfMemoryError: unable to create new native thread

大数据 java native 云计算 hbase hadoop 线程 配置 集群 spark Transfer Create Security thread ulimit

2
欢迎关注公众号,哈尔的数据城堡。里面有数据,代码,以及深度思考。以及一些小彩蛋,欢迎关注

感兴趣or擅长的领域:

更多>
更多>
张宽天
张宽天
文章:0丨 粉丝:0丨 话题:0
飞升
飞升
文章:0丨 粉丝:0丨 话题:0
zz2019
zz2019
文章:0丨 粉丝:2丨 话题:0
游侠007
游侠007
文章:0丨 粉丝:0丨 话题:0
王际超
王际超
文章:0丨 粉丝:0丨 话题:0
夢隨心逝
夢隨心逝
文章:0丨 粉丝:0丨 话题:0