与e-mapreduce相关精彩内容-云栖社区-阿里云

使用资源编排服务（ROS）轻松玩转E-MapReduce（EMR）

作者: Prodesire 369人浏览

前言如果您还没有听说过资源编排服务（ROS），那么恭喜您，本文将带您走进一个新的世界，学习资源管理的新姿势。当您在使用E-MapReduce（EMR）时，是否想过使用OpenAPI或者是SDK来创建实例？是否为太多的参数感到困扰，为不一样的参数名称形态看到困惑？尤其是要通过代码管理整个实例的生命周期感到烦恼？但您本不该为此烦恼，不是吗？其实您只是想创建若干个资源，您不想关心应该调用

hadoop 资源编排 VPC ECS 阿里技术协会 cluster 安全组集群控制台 aliyun e-mapreduce string ROS EMR

8月28日社区直播【Spark Streaming SQL流式处理简介】

作者: 开源大数据EMR 420人浏览

本次直播将简要介绍EMR Spark Streaming SQL，主要包含Streaming SQL的语法和使用，最后做demo演示

云栖社区编程语言大数据 SQL 钉钉 spark 流式计算 aliyun e-mapreduce EMR demo 安全问道

8月28日社区直播【Spark Streaming SQL流式处理简介】

作者: 阿里云E-MapReduce团队 297人浏览

本次直播将简要介绍EMR Spark Streaming SQL，主要包含Streaming SQL的语法和使用，最后做demo演示

nginx 数据存储与数据库大数据 SQL 钉钉 spark 流式计算 aliyun e-mapreduce EMR demo 安全问道

使用EMR-Kafka Connect进行数据迁移

作者: ligh-rain 5152人浏览

流式处理中经常会遇到Kafka与其他系统进行数据同步或者Kafka集群间数据迁移的情景。使用EMR Kafka Connect可以方便快速的实现数据同步或者数据迁移。本文介绍使用EMR Kafka Connect的REST API接口在Kafka集群间进行数据迁移。

分布式系统与计算 Apache 数据库配置集群 Image 数据迁移同步 e-mapreduce EMR 数据同步 zookeeper kafka 流式处理

E-MapReduce产品探秘，扩展开源生态云上的能力

作者: 开源大数据EMR 248人浏览

E-MapReduce的产品能力介绍，通过EMR来构建高效的云上大数据平台，优化云上的使用成本，更快的计算效率。

云栖社区编程语言系统研发与运维大数据 aliyun e-mapreduce EMR

7月10日直播【E-MapReduce产品探秘，扩展开源生态云上的能力】

作者: 阿里云E-MapReduce团队 258人浏览

E-MapReduce的产品能力介绍，通过EMR来构建高效的云上大数据平台，优化云上的使用成本，更快的计算效率。

安全与风控数据存储与数据库系统研发与运维大数据 aliyun e-mapreduce EMR

钉钉群直播【E-MapReduce产品探秘，快速构建可扩展的高性能大数据平台】

作者: 阿里云E-MapReduce团队 586人浏览

E-MapReduce整体介绍。通过EMR如何构建一个云上的大数据集群，常见的使用场景和硬件选型指南。

nginx 系统软件数据存储与数据库大数据集群 Image 钉钉 e-mapreduce EMR 高性能安全问道

EMR Spark Runtime Filter性能优化

作者: 寒沙牧 3751人浏览

Join是一个非常耗费资源耗费时间的操作，特别是数据量很大的情况下。一般流程上会涉及底层表的扫描/shuffle/Join等过程, 如果我们能够尽可能的在靠近源头上减少参与计算的数据，一方面可以提高查询性能，另一方面也可以减少资源的消耗(网络/IO/CPU等)，在同样的资源的情况下可以支撑更多的查询。

性能 spark e-mapreduce EMR sparksql RuntimeFilter

钉钉群直播【E-MapReduce产品探秘，快速构建可扩展的高性能大数据平台】

作者: 开源大数据EMR 502人浏览

E-MapReduce整体介绍。通过EMR如何构建一个云上的大数据集群，常见的使用场景和硬件选型指南。

云栖社区系统软件数据存储与数据库系统研发与运维大数据集群 Image 钉钉 e-mapreduce EMR 高性能

钉钉群直播【Structured Steaming的进阶与实践】

作者: 开源大数据EMR 644人浏览

structured steaming因其低时延和提供的SQL API等特性被越来越多的企业所使用，作为实时计算的首选。本次分享structured steaming的使用，包含spark 2.4 structured streaming的新特性，API原理和使用场景等的介绍。

云栖社区数据存储与数据库互联网产品及应用大数据 SQL 钉钉 spark API e-mapreduce

钉钉群直播【Structured Steaming的进阶与实践】

作者: 阿里云E-MapReduce团队 565人浏览

structured steaming因其低时延和提供的SQL API等特性被越来越多的企业所使用，作为实时计算的首选。本次分享structured steaming的使用，包含spark 2.4 structured streaming的新特性，API原理和使用场景等的介绍。

nginx 编程语言移动开发与客户端大数据 SQL 钉钉 spark API e-mapreduce 安全问道

EMR Spark Relational Cache的执行计划重写

作者: 健身不健身 1719人浏览

背景 EMR Spark提供的Relational Cache功能，可以通过对数据模型进行预计算和高效地存储，加速Spark SQL，为客户实现利用Spark SQL对海量数据进行即时查询的目的。Relational Cache的工作原理类似物化视图，在用户提交SQL语句时对语句进行分析，并选出可用的预计算结果来加速查询。

Cache spark e-mapreduce EMR Hive aggregate kylin sparksql adhoc RelationalCache Jindo Cube