1. 云栖社区>
  2. 全部标签>
  3. #Hive#
Hive

#Hive#

已有2人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

通过spark-thriftserver读取hive表执行sql时,tasks 数量怎么设置

我在使用spark-thriftserver的方式,通过beeline执行sql的时候,thriftserver会扫描所查询hive表的所有分区(hdfs上面的路径)然后有多少个路径,就会自动生成多少个task,这个task的数量可以调整吗…

hdfs SQL spark Hive

大家好,请教一下hbase数据导出到hive应该用什么组件

大家好,请教一下hbase数据导出到hive应该用什么组件

系统软件 hbase Hive

hive添加自定义udf出现权限问题,有谁遇到过没?

hive添加自定义udf出现权限问题,有谁遇到过没?

云栖社区 hbase Hive UDF

说到事务,衍生了一个问题,请教一下,像hive/mlsql/deltalake或者说spark 支持某级别事务 的意义在哪?是否会演变会支持大部分事务?

说到事务,衍生了一个问题,请教一下,像hive/mlsql/deltalake或者说spark 支持某级别事务 的意义在哪?是否会演变会支持大部分事务?

spark Hive

Spark 【问答合集】

如何使用spark将kafka主题中的writeStream数据写入hdfs?https://yq.aliyun.com/ask/493211当Spark在S3上读取大数据集时,在“停机时间”期间发生了什么?https://yq.aliy…

大数据 hdfs 函数 Json 集群 问答 控制台 spark aliyun DataFrame ask stream Hive 流数据

请问:spark 处理 hive 仓库数据,用sparksql 好?还是hivesql好?sparksql 操作hive 的分区分桶表麻烦吗?

请问:spark 处理 hive 仓库数据,用sparksql 好?还是hivesql好?sparksql 操作hive 的分区分桶表麻烦吗?

hbase spark Hive

大佬们,hive添加自定义udf出现权限问题,有谁遇到过没?

我们这hive整合sentry,由sentry去控制的。sentry没办法对这个授权

spark Hive UDF

Hive/Impala 作业读取 SparkSQL 导入的 Parquet 表报错

Hive/Impala 作业读取 SparkSQL 导入的 Parquet 表报错(表包含 Decimal 格式的列):Failed with exception java.io.IOException:org.apache.parquet…

系统软件 LBS 大数据 算法 开发框架与中间件 java 无线 hdfs Apache exception Hive file read 安全问道

好blink有访问hive的案例吗?在开源的flink-examples-table中没有访问hive的案例

好blink有访问hive的案例吗?在开源的flink-examples-table中没有访问hive的案例

Hive Blink

大佬们咨询个问题,就是使用Spark On Hive时,动态的将数据插入到Hive中,但是在Hive的数据表下会有很多文件,这个可以怎么设置一下呢

大佬们咨询个问题,就是使用Spark On Hive时,动态的将数据插入到Hive中,但是在Hive的数据表下会有很多文件,这个可以怎么设置一下呢

spark Hive

咨询个问题,hive on tez,insert overwrite table select * from A union all select * from B。插入分区表是会自动创建子目录 1、2、3如何解决?

咨询个问题,hive on tez,insert overwrite table select from A union all select from B。插入分区表是会自动创建子目录 1、2、3如何解决?

spark BY Hive 分区表

请教个问题,blink在提交sql作业时,并发可以不同吗?比如,我想join两个hive表,但是两个表大小差很多,所以一个表的并发需要大一些,另外一个表的并发需要小一些,但是直接使用sql提交时,设置并发后,所有的节点都是一样的并发。有没有什么办法可以调的啊

转自钉钉群21789141:请教个问题,blink在提交sql作业时,并发可以不同吗?比如,我想join两个hive表,但是两个表大小差很多,所以一个表的并发需要大一些,另外一个表的并发需要小一些,但是直接使用sql提交时,设置并发后,所有…

大数据 SQL 钉钉 Hive 流计算 flink 实时计算

请问一下本地可以通过blink连接远程的hive吗?

转自钉钉群21789141:请问一下本地可以通过blink连接远程的hive吗?

大数据 钉钉 Hive Blink flink 实时计算

连接hive,hive执行引擎是 MR 还是 Flink ?

转自钉钉群21789141:连接hive,hive执行引擎是 MR 还是 Flink ?

大数据 钉钉 Hive flink 实时计算

请教一下blink的这个读hive meta的catalog是只适用于读取batch数据的场景吧

转自钉钉群21789141:请教一下blink的这个读hive meta的catalog是只适用于读取batch数据的场景吧

Image 钉钉 Hive 流计算 flink 实时计算

flink写hive表有什么好的建议?

转自钉钉群21789141:flink 写 hive 表 有什么好的建议?

大数据 钉钉 Hive 流计算 flink 实时计算

blink中hive维表的支持,并支持定时的load外部数据

业务中维表主要存储在Hive中,维表的支持要实现lookuptablefunction,但是blink本身的hivetablesource并没有实现该接口,且不支持定时Load数据,请问自己要怎么实现

Hive 存储 flink

5
GO