1. 云栖社区>
  2. 全部标签>
  3. #e-mapreduce#
e-mapreduce

#e-mapreduce#

已有0人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

E-MapReduce提交Hadoop程序时的详细参数

按阿里云官方文档配的参数,任务还是提交时报错。。。能给我一个详细的参数配置吗。。jar oss://my-emr-test/examples-1.1.jar com.aliyun.emr.example.spark.WordCount Dw…

大数据 OSS hadoop 配置 spark aliyun e-mapreduce EMR input

EMR集群spark出现Tez相关类找不到

Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/tez/dag/api/SessionNotRunning at org.apache.hadoo…

java native hadoop SQL Apache 集群 spark scala API e-mapreduce exception EMR Hive Tez

EMR可以直接消费ECS上的kafka消息嘛

如题,EMR可以消费ECS上的kafka消费,或者说kafka可以直接sink消息到EMR嘛

ECS e-mapreduce EMR kafka

阿里云是否保证E-MapReduce中各个服务的稳定运行

最近准备使用E-MapReduce,但是需要了解阿里云是否保证E-MapReduce中类似于hbase、zookeeper、spark等服务的正常运行,需不需要用户自己管理?

大数据 阿里云 e-mapreduce

为什么E-MapReduce创建集群只能选择专有网络?

如图所示,只有专有网络。

大数据 HTTPS 集群 e-mapreduce

E-MapReduce如何创建任务流

比如在oss中我有3个jar包,第一个为求数据条数,第二个求和,第三个除法我现在想求平均值,那就是求条数,求和,然后相除,用Java代码创建job 实际上就是java中创建2个job,第一的输出当作第二个的输入,并且不能第一个的输出先存到…

java e-mapreduce 工作流

E-mapreduce中用spark streaming 读取Loghub的问题

大家好。我在测试使用E-mapreduce中的spark streaming来采集Loghub的数据时,遇到点问题。我用Loghub监控一个文本文件,采用的是极简模式。该文本文件,每隔三秒生成一个1到10的随机数,如下图所示。 我修改了E…

监控 HTTPS 集群 测试 spark scala e-mapreduce EMR sparkstreaming loghub

Spark 接入 Log Service,从日志头部开始消费要怎么配置

如题,spark消费logservice中的日志数据,默认是从尾部开始消费,怎么配置从头部开始消费val loghubStream = LoghubUtils.createStream( ssc, loghubProject, …

云栖社区 实时系统 日志 LOG sdk 配置 spark e-mapreduce service

LoghubSample 抛出ClassNotFoundException

Caused by: java.lang.ClassNotFoundException: com.aliyun.openservices.loghub.client.exceptions.LogHubClientWorkerExceptio…

java HTTPS aliyun BY e-mapreduce

自己搭建的hadoop集群要迁移到EMR,数据怎么导上来呢?

搭建的hadoop集群,需要切换到EMR,原有集群上的数据怎么传输上来呢?

hadoop e-mapreduce EMR

aliyun emr集群上,zeppelin上往hive表里面插入一条记录,一直卡着不动

在自带的zeppelin界面上,操作hive sql往表里面插入一条数据,一直卡着不动。是不是有bug啊? 补充一下图:

hadoop e-mapreduce zeppelin

hadoop HA 集群中使用zeppline的Spark sql访问Hive数据失败

报错信息如下:

云栖社区 e-mapreduce

请问 E-MapReduce这个产品能使用我已经有的ecs服务器吗?

我已经有一个ecs 1cpu 4G内存 还有个RDS ,OSS 。我想配置 E-MapReduce的时候使用他们能不能行?

hadoop e-mapreduce

E-Mapduce产品有交互式和可视化的功能吗?

有没有一个界面,我可以直接运行sql的地方?运行的结果能展示成表格图表吗?

hadoop spark e-mapreduce

Aliyun E-MapReduce中zeppelin的报表能自动发邮件或者共享吗

我在使用你们阿里云的E-MapReduce集群,使用其中的zeppelin可以进行交互式操作、可视化报表,但是这些报表的图片数据,可以自动发邮件吗?或者怎么分享给别人?

hadoop spark e-mapreduce

再emapreduce中使用spark访问java.lang.IllegalStateException: Did not find registered driver with class com.mysql.jdbc.Driver

16/04/28 16:46:19 WARN scheduler.TaskSetManager: Lost task 0.0 in stage 0.0 (TID 0, emr-worker-1.cluster-18938): java.l…

hadoop spark e-mapreduce

E-MapReduce执行Hive作业后,状态一直是等待

已经把作业的sql改成最简单的建表语句了,还是不行

e-mapreduce

在e-mapreduce跑hadoop mr报错,com.aliyun.oss.OSSException: AccessDenied

Error: java.io.IOException: java.lang.reflect.InvocationTargetException at com.aliyun.fs.oss.utils.OSSClientAgent.ha…

hadoop e-mapreduce Mapreduce

如果E-mapreduce的master 密码忘了的话,我怎么找回来呢

如果E-mapreduce的master 密码忘了的话,我怎么找回来呢?

分布式系统与计算 hadoop e-mapreduce

E-Mapreduce如何处理RDS的数据

E-Mapreduce如何处理RDS的数据

分布式系统与计算 RDS hadoop e-mapreduce

4
GO