1. 云栖社区>
  2. 全部标签>
  3. #spark#
spark

#spark#

已有24人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

请问我只通过ssh登陆集群master的话,能使用哪些命令呢?可以控制集群运行spark作业吗

请问我只通过ssh登陆集群master的话,能使用哪些命令呢?可以控制集群运行spark作业吗

hadoop spark emapreduce

用emr,spark 读取odps中2张表。然后用B表中的字段 替换掉A表中对应的字段。 B表和A表有字段关联。然后把结果写到C表,

spark 读取odps中2张表。然后用B表中的字段 替换掉A表中对应的字段。 B表和A表有字段关联。然后把结果写到C表,目前spark odps没有多表的例子能提供一个demo吗?

hadoop spark

在Spark SQL中,列名为敏感词汇时如何处理

有一张表,其第二列的列名为first。在运行SQL语句select first from tablename时老是报错,原因是把first列名当作SQL中的first()函数了。请问这种情况如何处理?难道只能去改表tablename中的列名…

SQL spark

spark streaming接loghub数据的输出格式

spark streaming接loghub数据的输出格式

hadoop spark

测试LogService,spark Streaming 读取不到数据?

测试LogService,spark Streaming 读取不到数据?

hadoop spark

在emr使用spark怎么安装numpy呢

目前发现emr没有安装numpy库,怎么安装呢

分布式系统与计算 hadoop spark

E-Mapreduce的Spark软件安装目录

请问E-Mapreduce的Spark软件安装目录

hadoop spark

E-Mapduce产品有交互式和可视化的功能吗?

有没有一个界面,我可以直接运行sql的地方?运行的结果能展示成表格图表吗?

hadoop spark e-mapreduce

Aliyun E-MapReduce中zeppelin的报表能自动发邮件或者共享吗

我在使用你们阿里云的E-MapReduce集群,使用其中的zeppelin可以进行交互式操作、可视化报表,但是这些报表的图片数据,可以自动发邮件吗?或者怎么分享给别人?

hadoop spark e-mapreduce

你好,我想问问现在 的 E MapReduce 服务,支持 shark 吗?

你好,我想问问现在 的 E MapReduce 服务,支持 shark 吗?

hadoop spark

emapreduce的spark跑在哪里呢?

emapreduce的spark跑在哪里呢?

hadoop spark

再emapreduce中使用spark访问java.lang.IllegalStateException: Did not find registered driver with class com.mysql.jdbc.Driver

16/04/28 16:46:19 WARN scheduler.TaskSetManager: Lost task 0.0 in stage 0.0 (TID 0, emr-worker-1.cluster-18938): java.l…

hadoop spark e-mapreduce

在e-mapreduce跑spark streaming,计划1分钟打印一条日志发现没有打印

在e-mapreduce跑spark streaming,1分钟打印一条日志发现没有打印。

hadoop spark sparkstreaming

在E-Mapreduce运行hadoop job失败,java.lang.reflect.InvocationTargetException

按照文档https://help.aliyun.com/document_detail/emr/best-practice/Hadoop/Hive.html?spm=5176.docemr/trouble-shooting/oss-ram…

hadoop spark Hive Mapreduce

hadoop mapreduce与spark,我该如何选择呢?

目前我在使用hadoop emapreduce这个产品,我该怎么选择到底是用mapreduce还是用spark呢?

分布式系统与计算 hadoop spark Mapreduce

E-mapreduce是否提供实时计算的功能

E-mapreduce是否提供实时计算的功能,比如spark streaming等

分布式系统与计算 hadoop spark

spark1.6连接cassandra报错

/Library/Java/JavaVirtualMachines/jdk1.7.0_79.jdk/Contents/Home/bin/java -Didea.launcher.port=7533 "-Didea.launcher.bin…

hadoop spark

e-mapreduce读取OSS失败

使用e-mapreduce创建集群和spark作业,输入和输出使用oss。在输入数据很小时(几kb),程序没有问题。当输入的文件是100MB时,作业运行失败,查看节点的错误日志,有如下内容:16/02/06 15:56:08 INFO o…

OSS spark e-mapreduce knn

我的spark性能为何这么差?

我用scala写了一个knn分类的程序,在spark上运行,和单机下运行时间做对比。用e-mapreduce,创建spark集群,2个节点,4核cpu,8GB内存,高效云磁盘。输入和输出都 用OSS。训练集1.9kb,测试集33Mb的情况下…

spark e-mapreduce knn

28
GO