梅熙 + 关注

使用hadoop restful api实现对集群信息的统计

发布时间:2017-06-06 18:40:00 浏览:4663 评论 :1

本文根据hadoop/spark的RESTful API,实现了对集群基本信息的统计功能,包括HDFS文件系统、job情况、资源队列情况的统计。这些API只提供了基础的数据,具体的统计与分析,还需要基于这些基础数据做一些简单的开发。

hadoop Apache http 集群 API EMR type Mapreduce

EMR集群上capacity scheduler的ACL实现

发布时间:2017-05-15 09:44:52 浏览:1405 评论 :0

## 背景 前面[一篇](https://yq.aliyun.com/articles/79700)介绍了yarn的capacity scheduler原理,实验了在EMR集群上使用capacity scheduler对集群资源的隔离和quota的限制。本文会介绍EMR集群上capacity scheduler的ACL实现。 为什么要做这个?前面给集群分配的资源分配了多个队列,以及每个队列

大数据 hadoop 阿里技术协会 配置 cluster 集群 EMR capacityscheduler

EMR集群上capacity scheduler的ACL实现

发布时间:2017-05-12 18:46:07 浏览:5671 评论 :0

本文接着yarn capacity scheduler的实现原理,介绍了capacity scheduler的设置和其中需要注意的问题,并结合EMR集群做了实际操作实验。

大数据 hadoop 配置 cluster 集群 EMR

利用yarn capacity scheduler在EMR集群上实现大集群的多租户的集群资源隔离和quota限制

发布时间:2017-05-10 19:29:00 浏览:6005 评论 :0

本文结合EMR集群,讲述了如何利用yarn capacity scheduler在EMR集群上实现大集群的多租户的集群资源quota限制与管控。

大数据 hadoop HTTPS 配置 集群 EMR Mapreduce

E-MapReduce集群使用Oozie工作流简单示例

发布时间:2016-06-28 12:27:33 浏览:2629 评论 :2

本文简单介绍了,如何在E-MapReduce上提交Oozie workflow job。提供了可以直接下载运行的示例代码,欢迎使用。

e-mapreduce oozie

RRDTool原理简介

发布时间:2016-06-08 17:08:24 浏览:3113 评论 :0

ganglia RRDTool

The Apache Software Foundation Announces Apache® Zeppelin™ as a Top-Level Project

发布时间:2016-05-26 18:01:02 浏览:1953 评论 :0

Apache Zeppelin顺利毕业,升级为顶级项目!

hadoop spark zeppelin visualization bigdata

通过ZeppelinHub viewer来分享zeppelin的notebook和报表数据

发布时间:2016-05-23 16:11:59 浏览:7290 评论 :0

最近有使用E-MapReduce的同学咨询如果将zeppelin中的表表数据进行共享。这里就介绍一下在Aliyun E-MapReduce的集群中使用ZeppelinHub来进行notebook和报表的分享。

hadoop e-mapreduce

如何在Aliyun E-MapReduce集群上使用Zeppelin和Hue

发布时间:2016-05-11 22:34:45 浏览:12588 评论 :3

目前Aliyun E-MapReduce支持了zeppelin和hue,在Aliyun E-MapReduce集群上可以很方便的使用zeppelin和hue。本文将详细介绍如何在Aliyun E-MapReduce玩转Zeppelin和Hue!

hadoop e-mapreduce Hive hue zeppelin