1. 云栖社区>
  2. 全部标签>
  3. #spark#
spark

#spark#

已有24人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

各位高手,flink有没有像spark那样的启动命令,可以直接加载hdfs上的jar包

各位高手,flink有没有像spark那样的启动命令,可以直接加载hdfs上的jar包?

hdfs spark flink

spark +hbase 数据仓库有什么资料可参考么?

3 个方面:1、业务相关2、数据同步:调度系统3、分析:spark 引擎

云栖社区 数据存储与数据库 hbase 数据仓库 spark 数据同步

公司业务主要是在线复杂查询,涉及大量聚合操作,使用hbase可以么?

原有业务的存储过程使用SPARK-sql处理还是改写成spark写程序?

云栖社区 数据存储与数据库 hbase spark 存储过程

spark的spark-sql及Thrifserver的区别

1、beelin通过jdbc去连接 远程的sql服务Thriftserver,不依赖spark以及hadoop的con,且不占用客户端资源2、spark-sql的话,spark的driver要占用客户端机器的资源,依赖spark及hadoo…

hbase hadoop SQL spark JDBC Driver

[职业生涯] Java工程师发展问题

您好,我做Java工程师大约有4个年头了,4年除Java外还学习了python、scala、hadoop、spark、这些东西,但都没有实战,这些年技术用的很多也很杂。我现在遇到了问题,很多技术仅仅局限在会用的基础上,对于原理并不是很清楚,…

云栖社区 python 帮助 Java核心技术 java hadoop spark scala

HDFS 用spark anti join后体积膨胀厉害怎么办?

HDFS 用spark anti join后体积膨胀厉害,即使排序或者repartition都没有啥效果,压缩编码snappy,请问怎么解决呢?

大数据 hdfs 排序 spark snappy

[@徐雷frank][¥20]关于Spark Streaming 的问题,使用Scale继续开发,还是用Java好 用Java是否方便。

知道他的源码是Scale编写的,但是不想学习新语言,看了看也和Java差不太多请问直接用Java可以编写吗,是否方便,Springboot如何介入Spark Streaming

云栖社区 Java核心技术 java 源码 spark

Spark sql怎样实现即席查询?

是不是 创建索引好一点?

云栖社区 SQL spark 索引

spark怎么分析hbase的数据?

spark怎么分析hbase的数据?

hbase spark

spark streaming对接kafka,出现延迟,如何处理?

请问spark streaming对接kafka,出现三个批次的延迟,这个在程序中可以判断吗?应该调用哪个接口

云栖社区 数据存储与数据库 大数据 分布式系统与计算 hbase spark big data

yarn kill Container 之前会执行GC么?

Container killed by YARN for exceeding memory limits ,在yarn kill Container 之前会执行GC 吗?

系统研发与运维 故障方案 gc spark BY yarn

spark怎么分析hbase的数据?

spark怎么分析hbase的数据?

hbase spark

spark怎么分析hbase的数据?

spark怎么分析hbase的数据?

hbase spark

spark怎么分析hbase的数据?

参考 Hortonworks 开源的 shc ,目前阿里云也建议先使用它。

云栖社区 数据存储与数据库 hbase spark

用spark读取hbase的数据怎么做到实时出结果呢?能用SparkStreaming来结合hbase吗?

如果不行的话,只能批量处理了,就谈不上实时了,听您说的可以做实时,是怎么做的呢?

云栖社区 数据存储与数据库 hbase spark

28
GO