1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. H>
  5. hive导入数据

当前主题:hive导入数据

hive导入数据相关的博客

查看更多 写博客

Dremio案例_Hive数据分析

returned non-zero code: 1, cause: create does not exist b).导入数据 ## 导入本地数据 LOAD DATA LOCAL INPATH './hive/entry_index.txt' INTO TA

阅读全文

如果你也想做实时数仓…

作者:郭华(付空) 数据仓库也是公司数据发展到一定规模后必然会提供的一种基础服务,数据仓库的建设也是“数据智能”中必不可少的一环。本文将从数据仓库的简介、经历了怎样的发展、如何建设、架构演变、应用案例以及实时数仓与离线数仓的对比六个方面全面分享关于数仓的详细

阅读全文

如果你也想做实时数仓…

作者:郭华(付空) 数据仓库也是公司数据发展到一定规模后必然会提供的一种基础服务,数据仓库的建设也是“数据智能”中必不可少的一环。本文将从数据仓库的简介、经历了怎样的发展、如何建设、架构演变、应用案例以及实时数仓与离线数仓的对比六个方面全面分享关于数仓的详细

阅读全文

Alluxio使用——Hive篇

1.服务启停 Zookeeper ./zookeeper/bin.zkServer.sh start ./zookeeper/conf/zoo.cfg ./zookeeper/bin.zkServer.sh stop Hadoop ./hadoop/sbin

阅读全文

浅谈分布式计算的开发与实现(一)

介绍 分布式计算简单来说,是把一个大计算任务拆分成多个小计算任务分布到若干台机器上去计算,然后再进行结果汇总。 目的在于分析计算海量的数据,从雷达监测的海量历史信号中分析异常信号(外星文明),淘宝双十一实时计算各地区的消费习惯等。 海量计算最开始的方案是提高

阅读全文

Spark问答合集及解决方法

Spark问答合集及解决方法,转自阿里云开发者问答,大家有问题可以移步阿里云问答模块:https://developer.aliyun.com/ask/ 如何使用spark将kafka主题中的writeStream数据写入hdfs?https://yq.al

阅读全文

MaxCompute2.0更新对数据仓库教学的影响

因为之前在学校授课过程中讲授数据仓库课程时是通过MaxCompute来进行讲解的,因此针对这次MaxCompute2.0的升级,在我在教学中也对课程内容同样进行了升级,这里针对主要的升级点进行一些说明。 针对数据科学与大数据技术专业的学生来说,数据仓库应该算

阅读全文

大数据平台测试

阅读全文

hive导入数据相关问答

查看更多 提问题

Spark 【问答合集】

如何使用spark将kafka主题中的writeStream数据写入hdfs? https://yq.aliyun.com/ask/493211 当Spark在S3上读取大数据集时,在“停机时间”期间发生了什么? https://yq.aliyun.co

阅读全文

Hive/Impala 作业读取 SparkSQL 导入的 Parquet 表报错

Hive/Impala 作业读取 SparkSQL 导入的 Parquet 表报错(表包含 Decimal 格式的列):Failed with exception java.io.IOException:org.apache.parquet.io.Parque

阅读全文

请教一下,我hive中数据大小为16g,通过importtsv生成了hfile 文件,导入到hbase中了,数据变成130多g,还有什么更好的办法吗

请教一下,我hive中数据大小为16g,通过importtsv生成了hfile 文件,导入到hbase中了,数据变成130多g,还有什么更好的办法吗

阅读全文

DataX 从Hive导入Mysql中提示字段数不相等

我从一张HIve表往Mysql表中导入数据时,HIve一些分区字段值为空或为NULL,其他字段有值的分区导入正常,遇到这种情况怎么姐解决啊?![_I2ZS77N71CKV6ISCQ_CT7](https://yqfile.alicdn.com/17746a93

阅读全文

使用sqoop导入mysql中的表到hive中去,能否指定表存放在hive的数据库中吗?

利用sqoop将mysql中的数据导入到hive中时,为什么总是将mysql中的表存放在hive的默认数据库中? 不能指定表存放在hive的某个具体的数据库下面吗?

阅读全文

DATAX hdfsreader读取hive orc 写入mongodb读取端丢数

有张分区每个分区后 5000kw 的表,并行导了几天的数进mongodb, 部分日期 出现 数据丢失。 整个过程 datax无报错 ,有的日期丢失超过1000w数据。 导入过程后两天出现过 hdfs空间满的情况, 也就是 导入时 空间使用率很高,预计超过

阅读全文

用E-MapReduce sqoop产品导入数据后为什么hdfs目录是空的

指定--target-dir A --import-hive --hive-table,执行成功后为什么我指定的hdfs目录没内容

阅读全文

E-MapReduce产品sqoop把数据导入hdfs一个目录还是hive的一个表中,这两种有区别吗

E-MapReduce产品sqoop把数据导入hdfs一个目录还是hive的一个表中,这两种有区别吗

阅读全文