一分钟了解阿里云产品:E-MapReduce概述

简介:   阿里云有很多出色的产品,今天让我们来一起了解下E-MapReduce吧。   什么是E-MapReduce呢?   简单来说,E-MapReduce是构建于阿里云ECS弹性虚拟机之上,运行在阿里云平台上的一种大数据处理系统解决方案。它能够让用户将Apache Hadoop和Apache

 

阿里云有很多出色的产品,今天让我们来一起了解下E-MapReduce吧。

 

什么是E-MapReduce呢?

 

简单来说,E-MapReduce是构建于阿里云ECS弹性虚拟机之上,运行在阿里云平台上的一种大数据处理系统解决方案。它能够让用户将Apache Hadoop和Apache Spark运行在阿里云的云平台上,提供给用户在云上的分析和处理大数据的平台。通过将Hadoop和Spark运行在云平台上,让用户可以非常方便的使用Hadoop和Spark生态系统中的其他周边系统(如Apache Hive,Apache Pig,HBase等)来分析和处理自己的数据。不仅如此,用户还可以通过E-MapReduce将数据非常方便的导入和导出到阿里云其他的云数据存储系统和数据库系统(如Aliyun OSS, Aliyun RDS)中。

 

E-MapReduce与传统物理集群方式相比,有着诸多优势,具体有哪些特点和功能呢?我们来瞧瞧。

 

E-MapReduce按照所选硬件机型(CPU、内存),所选择软件组合和版本,进行自动化部署,与阿里云的其他产品进行了深度整合,可以通过主子账号对服务权限进行整合阿里云RAM资源权限管理系统,可以通过主子账号对服务权限进行隔离。

 

 

进一步的,由于E-MapReduce这么多的优势,在应用上,E-MapReduce自由选择机器配置(CPU,内存)和磁盘类型,自由选择服务器规模,包括Master和Slave的数量,自由选择开源大数据生态软件组合和版本,目前包括Hadoop和Spark,自由选择启动集群的方式,分为临时集群和长时间运行集群。E-MapReduce支持丰富的作业类型和灵活的作业执行计划。

 

 

E-MapReduce这么强大,可以应用在那些场景中呢?以下简单罗列几个。

 

E-MapReduce可以应用在离线数据处理、Ad hoc数据分析、海量数据在线服务、流式数据处理。

 

 

E-MapReduce典型特性介绍:

https://www.aliyun.com/product/emapreduce?spm=5176.383518.201.18.2vcqYg

 

E-MapReduce五大热点技术问题分析:

https://yq.aliyun.com/articles/6927?spm=0.0.0.0.pTiuqB


E-MapReduce体验之常见问题 :

https://yq.aliyun.com/articles/6928?spm=0.0.0.0.Oxy3JO

目录
相关文章
|
20天前
|
关系型数据库 分布式数据库 数据库
成都晨云信息技术完成阿里云PolarDB数据库产品生态集成认证
近日,成都晨云信息技术有限责任公司(以下简称晨云信息)与阿里云PolarDB PostgreSQL版数据库产品展开产品集成认证。测试结果表明,晨云信息旗下晨云-站群管理系统(V1.0)与阿里云以下产品:开源云原生数据库PolarDB PostgreSQL版(V11),完全满足产品兼容认证要求,兼容性良好,系统运行稳定。
|
20天前
|
SQL 存储 API
阿里云实时计算Flink的产品化思考与实践【下】
本文整理自阿里云高级产品专家黄鹏程和阿里云技术专家陈婧敏在 FFA 2023 平台建设专场中的分享。
110174 9
阿里云实时计算Flink的产品化思考与实践【下】
|
1天前
|
API
阿里云微服务引擎及 API 网关 2024 年 3 月产品动态
阿里云微服务引擎及 API 网关 2024 年 3 月产品动态。
|
2天前
|
安全 云计算
电子好书发您分享《阿里云产品手册2024版.阿里云产品手册2024版》
**《阿里云产品手册2024版》电子书分享:** 探索阿里云最新技术与服务,涵盖云计算、安全、移动研发等领域,详尽指南助您高效上云。[阅读链接](https://developer.aliyun.com/ebook/8326/116556?spm=a2c6h.26392459.ebook-detail.4.176b272aLerqlg)
11 1
|
6天前
|
云安全 数据采集 安全
阿里云安全产品,Web应用防火墙与云防火墙产品各自作用简介
阿里云提供两种关键安全产品:Web应用防火墙和云防火墙。Web应用防火墙专注网站安全,防护Web攻击、CC攻击和Bot防御,具备流量管理、大数据防御能力和简易部署。云防火墙是SaaS化的网络边界防护,管理南北向和东西向流量,提供访问控制、入侵防御和流量可视化。两者结合可实现全面的网络和应用安全。
阿里云安全产品,Web应用防火墙与云防火墙产品各自作用简介
|
8天前
|
消息中间件 人工智能 监控
|
16天前
|
消息中间件 Cloud Native Serverless
飞天发布时刻丨阿里云 ApsaraMQ 全面升级,携手 Confluent 发布全新产品
阿里云在3月29日的飞天发布时刻宣布ApsaraMQ全面升级,实现全系产品Serverless化,与Confluent合作推出新产品,强化云原生消息队列服务。
|
8月前
|
数据采集 分布式计算 搜索推荐
Hadoop学习---7、OutputFormat数据输出、MapReduce内核源码解析、Join应用、数据清洗、MapReduce开发总结(一)
Hadoop学习---7、OutputFormat数据输出、MapReduce内核源码解析、Join应用、数据清洗、MapReduce开发总结(一)
|
8月前
|
数据采集 缓存 分布式计算
Hadoop学习---7、OutputFormat数据输出、MapReduce内核源码解析、Join应用、数据清洗、MapReduce开发总结(二)
Hadoop学习---7、OutputFormat数据输出、MapReduce内核源码解析、Join应用、数据清洗、MapReduce开发总结(二)
|
8月前
|
分布式计算 Hadoop 数据处理
Hadoop基础学习---6、MapReduce框架原理(二)
Hadoop基础学习---6、MapReduce框架原理(二)

热门文章

最新文章