封神 + 关注
阿里技术专家,专注大数据领域,6年分布式引擎研发经验

封神 参与了问答:

通过 Hive 创建 Phoenix外部表,稳不稳?

有没有这样在生产环境上使用的呢?

“建议通过spark访问Phoenix,hive访问Phoenix原则支持,阿里云团队不提供源码支持 阿里云 hbase团队的文档 创建:https://help.aliyun.com/document...查看全部>

封神 参与了问答:

Phoenix 结合 HBase 使用遇到的坑?

生产中遇到的坑有哪些?

“建议跟踪阿里云 hbase产品版本发布:https://help.aliyun.com/document_detail/72364.html?spm=a2c4g.11186623.6.564.77d7...查看全部>

封神 参与了问答:

Phoenix 语法有点怪 而且一些主键非唯一的不太适用 ?

如何避免?

“Phoenix是标准的sql语法,底层是hbase,最好是主键唯一。”

封神 参与了问答:

HBase 的多表 join 可以考虑用 Spark 吗?

是否可以直接读取 HFile?

“spark是支持hbase的多表join的,直接读取hfile会有一些冲突,建议还是走scan比较好。”

封神 参与了问答:

怎样用 HBase 构建实时数据仓库?

HBase 构建实时仓库,适合哪种业务场景?

“可以参考:http://hbase.group/slides/67 里面有比较详细的案例”

封神 参与了问答:

求证 bufferedmutator写的时候 delete、put会不会有顺序问题?

求证 bufferedmutator写的时候 delete、put会不会有顺序问题? 针对同一条数据先mutate(delete)再mutate(put) 一定能put成功吗?

“是按照时间戳来弄时间的,先写还是后写,看带的时间戳”

封神 参与了问答:

能举例说明下怎样在 Phoenix 上建立 HBase 的二级索引?

比如生产上需要注意哪些点?

“Phoenix是hbase的一个sql层,提供标准sql的入口。 新建二级索引文档:https://yq.aliyun.com/articles/536850 生产也没有特别需要注意的,跟正常使用一样...查看全部>

封神 参与了问答:

hbase建表分区的问题

public void createTable(HTableDescriptor desc, byte [] startKey, byte [] endKey, int numRegions) t...

“最好的分区原则: 初次接触HBase的客户,在创建HBase表的时候,不指分区的数目,另外就是rowkey设计不合理,导致热点。 最为常见的建表语句为: create ‘t3’,’f1’, { NU...查看全部>

封神 参与了问答:

怎么解决 Carbondata频繁的update和delete,出现的delta小文件过多的问题?

这是一个劣势吧

“貌似解决不了”

封神 参与了问答:

HBase 设置表TTL后,数据会自动清除吗?

是否需要重启 HBase ? 执行大合并清除?

“在执行 大合并会自动清楚的。直接文件压缩,对集群影响较小。”

封神 发表了文章:

HBase多模式

发布时间:2018-11-06 20:16:11 浏览:2315 回帖 :0

HBase多模式,包括 分析层:支持复杂分析、算子下推;多模式层:提供各种模型转换,贴切业务;索引引擎:提供索引支持,基于 Lucene ;存储引擎:提供 KV 支持,基于LSM;分布式文件层:保障...

hbase aliyun

封神 发表了文章:

云HBase集群的规划

发布时间:2018-04-17 14:20:40 浏览:5987 回帖 :1

在服务客户的时候,经常会被问到,我该选择什么配置的HBase呢?今天我们就来好好谈谈这个问题。

架构 OSS hbase 配置 集群 云盘 Core CPU 高性能 磁盘 存储

封神 评论了文章:

[Phoenix] 八、动态列

发布时间:2018-04-08 10:22:21 浏览:8187 回帖 :3

传统关系型数据库的动态列实现只能依赖逻辑层的设计实现,而Phoenix是HBase上的SQL层,借助HBase特性实现的动态列功能,具有高度的灵活性,告别业务逻辑层的复杂设计。

hbase phoenix

“在 一些元数据数据库的应用之中,非常有用的”

封神 评论了文章:

为什么要写技术文章-我对写作收获的理解

发布时间:2018-04-15 21:39:02 浏览:2518 回帖 :3

为了迎接更好的自己。 过去的止步不前 程序员最反感别人没写文档,最不喜欢自己写文档。 我一直很认同技术人员应该持续写技术文章,可以总结经验,打造个人品牌,等等。但加上公司内部分享,实际也没写...

架构 源码 写作 个人感悟

“多写一些好文章”

封神 发表了文章:

再谈全局网HBase八大应用场景

发布时间:2018-03-21 11:28:07 浏览:17860 回帖 :1

HBase可以说是一个数据库,也可以说是一个存储。拥有双重属性的HBase天生就具备广阔的应用场景。在2.0中,引入了OffHeap降低了延迟,可以满足在线的需求。引入MOB,可以存储10M左右的对象...

NOSQL hbase 数据库 弹性伸缩 对象存储 离线计算 分布式存储 存储

封神 发表了文章:

学术界关于HBase在物联网/车联网/互联网/金融/高能物理等八大场景的理论研究

发布时间:2017-09-22 12:38:00 浏览:8625 回帖 :0

HBase在互联网领域有广泛的应用,比如:互联网的消息系统的存储、订单的存储、搜索原材料的存储、用户画像数据的存储等,除此之外,在其它领域也有非常多的应用。

大数据 阿里云 hbase hadoop 金融 物联网 数据中心 异构数据 type 存储 数据存储 gis 海量数据 车联网 交通

封神 发表了文章:

ApsaraDB for HBase - 规格的的选择

发布时间:2017-09-01 15:58:40 浏览:3861 回帖 :0

最近有一些客户在选择云HBase的规格时,往往比较迷糊,规格这么多,磁盘这么多,怎么选择呢?往往客户会有一定的迷糊。这里我们介绍下一些选择的逻辑,也预告下后续推出的规格。

阿里云 hbase 钉钉 云盘 qps 物联网 CPU 磁盘 存储

封神 评论了文章:

性能最高提升300%!阿里云数据库HBase版上线

发布时间:2017-08-22 17:23:18 浏览:14626 回帖 :2

阿里云正式推出云数据库HBase版(ApsaraDB forHBase),100%兼容HBase协议的分布式数据库,基于HDFS分布式文件系统,支持高达10PB的存储空间,满足最高5000W QP...

架构 监控 阿里云 hbase 性能 HTTPS 高可用 数据库 高并发 集群 Image 云数据库 数据大屏 金融云 物联网

“相关资料:我为什么建议自建HBase集群应该迁移过来? 使用Sqoop从Mysql向云HBase同步数据:一次性异构数据源导入,如果自己做周期性也可以使用CopyTable同步HBase数据:一次性h...查看全部>

封神 发表了文章:

HBase全网最佳学习资料汇总

发布时间:2017-08-13 19:11:08 浏览:26448 回帖 :1

HBase这几年在国内使用的越来越广泛,在一定规模的企业中几乎是必备存储引擎,互联网企业阿里巴巴、百度、腾讯、京东、小米都有数千台的HBase集群,中国电信的话单、中国人寿的保单都是存储在HBase中...

大数据 监控 阿里云 hbase HTTPS Apache http 互联网 阿里巴巴 集群 aliyun 物联网 报表 html 存储

封神 发表了文章:

HBase Phoenix助力海量数据实时分析

发布时间:2017-05-18 19:55:16 浏览:19670 回帖 :0

phoenix满足海量数据实时分析需求,通过建立索引在海量数据上查询少量数据,并且基本实时返回; 支持做一些复杂的SQL操作,包括join,sub-query等;不适合于ETL,比如10T数据变为10...

架构 hbase SQL Apache 索引 JDBC index 海量数据 实时分析

6
封神 09年加入阿里巴巴,阿里云高级技术专家、架构师;专注在大数据、分布式数据库领域,10年分布式研发经验;参与研发万台大数据Hadoop离线计算平台;负责研发多款阿里云一级大数据及数据库产品,如云Cassandra

感兴趣or擅长的领域:

更多>
hbase小能手
hbase小能手
文章:106丨 粉丝:3549丨 话题:0
明惠
明惠
文章:18丨 粉丝:1756丨 话题:0
玄陵
玄陵
文章:27丨 粉丝:10228丨 话题:0
王爽wasugar
王爽wasugar
文章:0丨 粉丝:2161丨 话题:0
所在jason
所在jason
文章:14丨 粉丝:10372丨 话题:0
jark
jark
文章:6丨 粉丝:139丨 话题:0
更多>
游客5tlbsiued6f66
游客5tlbsiued6f66
文章:0丨 粉丝:0丨 话题:0
游客xrsfebwapv5pg
游客xrsfebwapv5pg
文章:0丨 粉丝:0丨 话题:0
游客pgmv7ymaphaqy
游客pgmv7ymaphaqy
文章:0丨 粉丝:0丨 话题:0
游客yg55p2wza37se
游客yg55p2wza37se
文章:0丨 粉丝:0丨 话题:0
游客gznbik6nehfos
游客gznbik6nehfos
文章:0丨 粉丝:0丨 话题:0
游客3niympmld2jos
游客3niympmld2jos
文章:0丨 粉丝:0丨 话题:0