1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. X>
  5. 学习Hadoop

当前主题:学习Hadoop

好程序员大数据学习路线分享分布式文件系统HDFS

好程序员大数据学习路线分享分布式文件系统HDFS,设计目标: 1、存储量大 2、自动快速检测应对硬件错误 3、流式访问数据 4、移动计算比移动数据本身更划算 5、简单一致性模型 6、异构平台可移植 特点 优点: 高可靠性:Hadoop按位存储和处理数据的能力

阅读全文

独家 | 从全方位为你比较3种数据科学工具的比较:Python、R和SAS(附链接)

翻译:张玲 校对:吴金笛 本文约3000字,建议阅读5分钟。 关于三种数据科学工具Python、R和SAS,本文从8个角度进行比较分析并在文末提供记分卡,以便你随时调整权重,快速做出选择。 简介 我们喜欢比较! 从比较三星、苹果、HTC的智能手机,iOS、A

阅读全文

7大板块,200+面试题,助你拿下offer | 运维工程师面试宝典

运维工程师是什么? 非互联网从业者被问及什么是运维时,有三个高频词汇:不知道、没听过、网管。互联网从业者则调侃说,运维是“背锅侠”。 究竟是什么人既是默默无闻的守护者,又是惨兮兮的“背锅侠”呢?实际上这个岗位绝对是一群幕后英雄。 运维工程师要会些什么? 逃不

阅读全文

阿里巴巴如何打造“EB级计算平台存储引擎”?

![1](https://yqfile.alicdn.com/2e62fe91843e3f2df03534c33f8407fada7c60e9.png) 阿里妹导读:MaxCompute是阿里EB级计算平台,经过十年磨砺,它成为阿里巴巴集团数据中台的计算核心

阅读全文

Flink在大规模状态数据集下的checkpoint调优

5万人关注的大数据成神之路,不来了解一下吗?5万人关注的大数据成神之路,真的不来了解一下吗?5万人关注的大数据成神之路,确定真的不来了解一下吗? 欢迎您关注《大数据成神之路》 今天接到一个同学的反馈问题,大概是: Flink程序运行一段时间就会报这个错误,定

阅读全文

菜鸟的Hadoop快速入门

一、相关概念 1、大数据 大数据是一门概念,也是一门技术,是以Hadoop为代表的大数据平台框架上进行各种数据分析的技术。 大数据包括了以Hadoop和Spark为代表的基础大数据框架,还包括实时数据处理,离线数据处理,数据分析,数据挖掘和用机器算法进行预测

阅读全文

招联金融研发总监姜良雷做客选型宝 亲身讲述大数据平台选型历程

写在前面 招联金融的研发总监姜良雷, 这位被称为大数据领域“老司机”的姜总,从1997年开始便在招商银行从事数据相关的工作;过去20年,亲历了招行历代数据库的建设与开发。2014年,参与了招联金融 (招行与联通的合资公司)的筹建,主导了招联大数据平台的选型和

阅读全文

从零开始实现一个IDL+RPC框架

一、RPC是什么 在很久之前的单机时代,一台电脑中跑着多个进程,进程之间没有交流各干各的,就这样过了很多年。突然有一天有了新需求,A进程需要实现一个画图的功能,恰好邻居B进程已经有了这个功能,偷懒的程序员C想出了一个办法:A进程调B进程的画图功能。于是出现了

阅读全文

学习Hadoop相关问答

查看更多 提问题

什么是波若Hadoop机器学习平台呢?

机器学习平台

阅读全文

[@小川游鱼][¥20]基于hadoop框架的java开发最新技术以及学习流程?

问题来自Java技术沙龙的王云慧 Java技术沙龙报名链接:https://yq.aliyun.com/promotion/796

阅读全文

[职业生涯] Java工程师发展问题

您好,我做Java工程师大约有4个年头了,4年除Java外还学习了python、scala、hadoop、spark、这些东西,但都没有实战,这些年技术用的很多也很杂。 我现在遇到了问题,很多技术仅仅局限在会用的基础上,对于原理并不是很清楚,去看源代码也看不

阅读全文

hive中的avg聚合函数是否可以使用combiner功能?

select deptno, sum(sal) as sum_sal from emp group by deptno; -- 这个SQL肯定是可以使用到Combiner功能的 select deptno, avg(sal) as avg_sal fr

阅读全文

Spark热火朝天,Hadoop何去何从??

刚开始学习Hadoop,就听说Spark会取代Hadoop。噩耗啊!为什么??为什么一切来的那么快???互联网新技术对于初学者来说是机遇还是盲从??

阅读全文

想学习hbase源码,建议从哪块入手呢?

从 架构 开始?

阅读全文

hadoop伪分布式环境搭建

最近开心学习hadoop,需要搭建伪分布式环境,但是由于自己的电脑配置不够,不能运行虚拟机,所以可以利用阿里云来搭建伪分布式环境吗?如果可以,应该怎么搭建呢?

阅读全文

单机Hadoop测试问题,Hadoop学习

Hadoop在Linux安装完成,如何使用,Hadoop究竟怎么运作,怎么实现单机下测试文件写入写出

阅读全文