hive数据导入云hbase

  1. 云栖社区>
  2. 阿里云数据库ApsaraDB>
  3. 博客>
  4. 正文

hive数据导入云hbase

沐远 2018-08-23 21:11:50 浏览3534
展开阅读全文

网络环境

  1. 专线:用户需要把hbase集群的VPC相关网络信息配置到专线里面,可直通hbase环境
  2. 公有云虚拟机VPC环境:选择和hbase通VPC
  3. 其他:需要开hbase公网
  4. 注意:默认导入hbase数据,依赖的hbase-common、hbase-client、hbase-server、hbase-protocol使用社区的包即可。如果是公网需要使用云hbase发布的相关包

方案一:hive关联hbase表方式

  1. 适用场景:数据量不大4T以下(因为需要走hbase的api导入数据)
  2. 从hbase页面获取zk连接地址,并用下述方式启动hive客户端
hive  --hiveconf hbase.zookeeper.quorum=xxxx
  1. hbase表不存在的情况
  • 创建hive表hive_hbase_table映射hbase表base_table,会自动

网友评论

登录后评论
0/500
评论
沐远
+ 关注
所属云栖号: 阿里云数据库ApsaraDB